JP6852518B2 - 宛先認識装置、小包自動区分システム、宛先認識方法及びプログラム - Google Patents
宛先認識装置、小包自動区分システム、宛先認識方法及びプログラム Download PDFInfo
- Publication number
- JP6852518B2 JP6852518B2 JP2017071555A JP2017071555A JP6852518B2 JP 6852518 B2 JP6852518 B2 JP 6852518B2 JP 2017071555 A JP2017071555 A JP 2017071555A JP 2017071555 A JP2017071555 A JP 2017071555A JP 6852518 B2 JP6852518 B2 JP 6852518B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- sorting number
- image
- sorting
- parcel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Sorting Of Articles (AREA)
- Character Input (AREA)
- Character Discrimination (AREA)
Description
本発明は、宛先認識装置、小包自動区分システム、宛先認識方法及びプログラムに関する。
宅配便などの小包の仕分けを自動化機するシステムが提供されている。例えば、特許文献１には、集荷された小包をコンベア上に載置して搬送し、バーコードリーダによって小包のラベルに印字された仕分コードを読み取って、適切な集積箱に振り分ける仕分システムが記載されている。また、特許文献１に記載の仕分システムによれば、バーコードから仕分コードが読み取れない場合であっても、仕分番号、郵便番号又は住所などの配達区分情報をスキャナで読み取り、ＯＣＲ（Optical Character Recognition）で認識することにより、コンベア上を搬送される荷物をオンライン上で仕分けることができる。また、ＯＣＲで配達区分情報を認識できない場合、係員がＶＣＤ（Video Coding Disk）装置から当該荷物の仕分番号を入力することにより仕分けを行うことができる。
特許文献１に記載のように小包の自動仕分けには、仕分け番号や住所をＯＣＲで読む必要があるが、小包用の宛先認識には、郵便ＯＣＲと呼ばれる書状郵便物の宛先認識方法と比較して、以下のような困難がある。
１．小包のサイズは一般的に大きなものになると横幅８０cm、長さ１５０cmまであり、書状郵便物（最大でＢ４サイズ）と比較して認識対象範囲が広い。これにより認識対象範囲内から住所領域を探すとき、より多くの住所領域の候補が上がり、正しい住所領域を求める難度が高い。
２．小包の梱包は段ボール箱あるいは包装紙、紙袋で梱包され、その上に住所ラベルが貼られていることが多く、書状郵便物の封筒と比べて住所領域の背景模様が複雑であるため、模様を誤検知しやすい。
３．書状郵便物はベルトなどに挟まれてほぼ傾きなく搬送される。その為、スキャナなどで撮像した画像は、宛先が表示された領域の傾きが小さく、ほぼ正位置である。しかし、小包の場合は、宛先の表示を上面にして自由な角度でコンベヤ上に置かれて搬送される。そして、上方から小包の上面をスキャナなどで撮像し、広い範囲を撮像した画像内で小包の位置と宛先の表示領域を探し出して認識しなければならないが、平面方向の回転角度には３６０°の自由度があり、認識を難しくしている。
このように小包を撮像した画像の中で仕分け番号や住所が表示された領域を特定するのは、一般的に困難が多い。特許文献１にもこのような課題に対する解決手段は記載されていない。
１．小包のサイズは一般的に大きなものになると横幅８０cm、長さ１５０cmまであり、書状郵便物（最大でＢ４サイズ）と比較して認識対象範囲が広い。これにより認識対象範囲内から住所領域を探すとき、より多くの住所領域の候補が上がり、正しい住所領域を求める難度が高い。
２．小包の梱包は段ボール箱あるいは包装紙、紙袋で梱包され、その上に住所ラベルが貼られていることが多く、書状郵便物の封筒と比べて住所領域の背景模様が複雑であるため、模様を誤検知しやすい。
３．書状郵便物はベルトなどに挟まれてほぼ傾きなく搬送される。その為、スキャナなどで撮像した画像は、宛先が表示された領域の傾きが小さく、ほぼ正位置である。しかし、小包の場合は、宛先の表示を上面にして自由な角度でコンベヤ上に置かれて搬送される。そして、上方から小包の上面をスキャナなどで撮像し、広い範囲を撮像した画像内で小包の位置と宛先の表示領域を探し出して認識しなければならないが、平面方向の回転角度には３６０°の自由度があり、認識を難しくしている。
このように小包を撮像した画像の中で仕分け番号や住所が表示された領域を特定するのは、一般的に困難が多い。特許文献１にもこのような課題に対する解決手段は記載されていない。
そこでこの発明は、上述した課題を解決する宛先認識装置、小包自動区分システム、宛先認識方法及びプログラムを提供することを目的としている。
本発明は、小包の宛先情報が含まれる画像に表示されたコード情報を読み取って、当該コード情報が示す仕分け番号を読み取るコード読取部と、前記仕分け番号の表示位置の基準となる情報として検出された前記コード情報が表示された座標および前記コード情報の表示の傾きの情報と、前記画像と、を取得し、前記画像を前記傾きの分だけ回転し、前記コード情報の表示領域と前記仕分け番号の表示領域との所定の位置関係と前記コード情報の座標とに基づいて、前記仕分け番号の表示領域を推定し、当該推定した表示領域を対象として仕分け番号の読み取り処理を行う仕分け番号読取部と、宛先情報を含む複数の参照用のラベル画像と、前記小包の宛先情報が含まれる画像との画像マッチングを行い、所定の閾値以上、且つ、最も高い合致度を有する前記参照用のラベル画像における前記仕分け番号の表示領域の座標情報に基づいて、前記小包の宛先情報が含まれる画像における前記仕分け番号の表示領域を対象として仕分け番号の読み取り処理を行うラベル識別部と、を備え、前記コード読取部は、前記仕分け番号の読み取りができない場合、前記画像における前記仕分け番号の表示位置の基準となる情報を検出する、宛先認識装置である。
また本発明は、上記の宛先認識装置と、前記小包の宛先情報が含まれる画像を撮像して、撮像した画像を前記宛先認識装置に出力するカメラと、前記宛先認識装置で読み取った仕分け番号に基づき、区分先を決定する、区分先決定機と、を備える、小包自動区分システムである。
また本発明は、小包の宛先情報が含まれる画像に表示されたコード情報を読み取って、当該コード情報が示す仕分け番号を読み取るステップと、前記仕分け番号の読み取りができない場合、前記画像における前記仕分け番号の表示位置の基準となる情報を検出するステップと、前記仕分け番号の表示位置の基準となる情報として検出された前記コード情報が表示された座標および前記コード情報の表示の傾きの情報と、前記画像と、を取得し、前記画像を前記傾きの分だけ回転し、前記コード情報の表示領域と前記仕分け番号の表示領域との所定の位置関係と前記コード情報の座標とに基づいて、前記仕分け番号の表示領域を推定し、当該推定した表示領域を対象として仕分け番号の読み取り処理を行うステップと、宛先情報を含む複数の参照用のラベル画像と、前記小包の宛先情報が含まれる画像との画像マッチングを行い、所定の閾値以上、且つ、最も高い合致度を有する前記参照用のラベル画像における前記仕分け番号の表示領域の座標情報に基づいて、前記小包の宛先情報が含まれる画像における前記仕分け番号の表示領域を対象として仕分け番号の読み取り処理を行うステップと、を有する宛先認識方法である。
また本発明は、宛先認識装置のコンピュータを、小包の宛先情報が含まれる画像に表示されたコード情報を読み取って、当該コード情報が示す仕分け番号を読み取る手段、前記仕分け番号の読み取りができない場合、前記画像における前記仕分け番号の表示位置の基準となる情報を検出する手段、前記仕分け番号の表示位置の基準となる情報として検出された前記コード情報が表示された座標および前記コード情報の表示の傾きの情報と、前記画像と、を取得し、前記画像を前記傾きの分だけ回転し、前記コード情報の表示領域と前記仕分け番号の表示領域との所定の位置関係と前記コード情報の座標とに基づいて、前記仕分け番号の表示領域を推定し、当該推定した表示領域を対象として仕分け番号の読み取り処理を行う手段、宛先情報を含む複数の参照用のラベル画像と、前記小包の宛先情報が含まれる画像との画像マッチングを行い、所定の閾値以上、且つ、最も高い合致度を有する前記参照用のラベル画像における前記仕分け番号の表示領域の座標情報に基づいて、前記小包の宛先情報が含まれる画像における前記仕分け番号の表示領域を対象として仕分け番号の読み取り処理を行う手段、として機能させるためのプログラムである。
本発明によれば、様々な態様で表示されている小包の宛先情報を確実に認識することができる。
＜実施形態＞
以下、本発明の一実施形態による小包の宛先情報認識処理を図１〜図１６を参照して説明する。
小包には小包を仕分けるための仕分け番号と呼ばれる所定の桁数の番号が印字されている。小包の表面には宛名や住所も記載されているが、住所と仕分け番号を対応付けたデータテーブル（表）を参照することにより、住所から仕分け番号を導出することができ、小包には、仕分け番号をコード化した仕分け番号のバーコードを表示（印字）する。小包の自動仕分け処理においては、一般的には、小包を仕分ける区分機の搬送ルート上に設けられたバーコードリーダで小包に表示された仕分け番号のバーコードを読み取り、小包の区分を行う。なお、バーコードが読み取れなければ人手で区分を行うか、小包の画像を人が目視で見て仕分け番号を打鍵（ビデオコーディング）し、小包の区分を行う。本実施形態の小包用の宛先認識装置は、この区分機における区分け作業の自動化を、主にＯＣＲ技術や画像処理を駆使した認識技術によって仕分け先の情報を認識することにより行う。
以下、本発明の一実施形態による小包の宛先情報認識処理を図１〜図１６を参照して説明する。
小包には小包を仕分けるための仕分け番号と呼ばれる所定の桁数の番号が印字されている。小包の表面には宛名や住所も記載されているが、住所と仕分け番号を対応付けたデータテーブル（表）を参照することにより、住所から仕分け番号を導出することができ、小包には、仕分け番号をコード化した仕分け番号のバーコードを表示（印字）する。小包の自動仕分け処理においては、一般的には、小包を仕分ける区分機の搬送ルート上に設けられたバーコードリーダで小包に表示された仕分け番号のバーコードを読み取り、小包の区分を行う。なお、バーコードが読み取れなければ人手で区分を行うか、小包の画像を人が目視で見て仕分け番号を打鍵（ビデオコーディング）し、小包の区分を行う。本実施形態の小包用の宛先認識装置は、この区分機における区分け作業の自動化を、主にＯＣＲ技術や画像処理を駆使した認識技術によって仕分け先の情報を認識することにより行う。
まず、小包における宛先情報の表示について、代表的な様態の例を説明する。図１４は、一般的な小包における宛先情報を説明する第１の図である。図１５は、一般的な小包における宛先情報を説明する第２の図である。
小包は一般的に宛名情報、区分情報、追跡情報を持つ。その様態は大別して大口業者が出す小包と個人が出す小包に分かれる。大口業者が出す小包の例を図１４に示す。大口業者が出す小包は、表面に一例として図１４や図１５に示すような印刷ラベルが貼付される。本明細書では、大口業者が出す小包に貼付けるラベルを大口ラベルと記載する。大口ラベルには、必ず仕分け番号１Ａと、仕分け番号をコード化した仕分けバーコード１Ｂと、追跡バーコード１Ｃ，１Ｄと、が表示されている。追跡バーコード１Ｃ、１Ｄは、小包の追跡問合せを行うための通常１２桁程度の追跡番号を含み、仕分けバーコードは、通常６桁程度の仕分け番号を含んでいる。また大口ラベル上には差出人の住所および氏名と、受取人の住所および氏名のいわゆる宛名が印活文字で印字されている。この宛名から住所データベースを参照することにより仕分け番号を特定できるため、本実施形態では、大口ラベルに印字された宛名住所も認識対象になる。
小包は一般的に宛名情報、区分情報、追跡情報を持つ。その様態は大別して大口業者が出す小包と個人が出す小包に分かれる。大口業者が出す小包の例を図１４に示す。大口業者が出す小包は、表面に一例として図１４や図１５に示すような印刷ラベルが貼付される。本明細書では、大口業者が出す小包に貼付けるラベルを大口ラベルと記載する。大口ラベルには、必ず仕分け番号１Ａと、仕分け番号をコード化した仕分けバーコード１Ｂと、追跡バーコード１Ｃ，１Ｄと、が表示されている。追跡バーコード１Ｃ、１Ｄは、小包の追跡問合せを行うための通常１２桁程度の追跡番号を含み、仕分けバーコードは、通常６桁程度の仕分け番号を含んでいる。また大口ラベル上には差出人の住所および氏名と、受取人の住所および氏名のいわゆる宛名が印活文字で印字されている。この宛名から住所データベースを参照することにより仕分け番号を特定できるため、本実施形態では、大口ラベルに印字された宛名住所も認識対象になる。
これに対して個人が差し出す小包の例を図１６に示す。本明細書では、個人が出す小包に貼付けるラベルを小ラベルと記載する。図１６は、一般的な小包における宛先情報を説明する第３の図である。個人の差出小包には、図１６に一例として示すような様態の複写式ラベルが貼付されており、ラベルには追跡バーコード２Ｃ、宛名住所および郵便番号が手書きあるいは印活文字で記載されているが、多くの場合、宛名および住所と郵便番号は手書きである。また複写式伝票が貼付された小包には、図１６に一例として示すような小ラベルが貼付され、小ラベル上に複写式伝票の宛名に対応した仕分け番号２Ａおよび仕分けバーコード２Ｂが印刷されている。この小ラベルは一般的に複写式ラベルの近傍あるいは複写式ラベルに重ねて貼付される場合が多い。
本実施形態の宛先認識装置は、これらの小包用宛先情報の自動認識を効率よく行う。
本実施形態の宛先認識装置は、これらの小包用宛先情報の自動認識を効率よく行う。
図１は、本発明の一実施形態による宛先認識装置の一例を示す図である。
図示するように宛先認識装置１０は、画像入力部１１と、バーコード読取検知部１２と、仕分け番号読取部１３と、大口ラベル識別部１４と、追跡バーコード利用部１５と、を備える。
画像入力部１１は、一次元スキャナなどで小包の画像（小包画像）を取り込む。
バーコード読取検知部１２は、小包の画像の中からバーコードを検出して、バーコードを読み取って仕分け番号を取得する。また、バーコード読取検知部１２は、バーコードを読み取ることができない場合、バーコードらしき画像（矩形部分）の座標位置およびその傾き（回転角度）を求める。
仕分け番号読取部１３は、矩形部分の座標位置および傾きに基づいて、小包画像を回転させ、矩形部分を基準として矩形部分の上側と右側の領域をＯＣＲで読む機能と、その後さらに小包画像の上下を回転させてから再び矩形部分の上側及び右側の領域をＯＣＲで読む機能を有する。
大口ラベル識別部１４は、予め登録された差出し頻度の多い代表的な大口顧客の複数の大口ラベルの画像に基づいて、画像入力部１１が入力した小包画像に対し、ラベル画像のパターンマッチング処理を行う。そして、大口ラベル識別部１４は、マッチングできた時の位置と角度を取得し、その角度分だけ、元の小包画像を回転し、予め登録しておいた大口ラベル画像とともに登録しておいた仕分け番号領域及び住所領域の位置座標を参照し、その領域内に対してＯＣＲ処理を行う。大口ラベル識別部１４は、これにより仕分け番号や住所を読み取る。
追跡バーコード利用部１５は、バーコード読取検知部１２が追跡バーコードの読み取りに成功した場合、入力した小包画像内には、必ず大口ラベルもしくは複写式伝票が含まれていると仮定して、追跡バーコードと大口ラベルや複写式伝票における住所領域との相対的な位置関係に基づいて住所情報の読み取りを行う。より具体的には、追跡バーコード利用部１５は、追跡バーコードの読み取りに成功した場合、追跡バーコードの傾きの角度分だけ、入力した元の小包画像を回転させる。そして、追跡バーコード利用部１５は、大口ラベルもしくは複写式伝票上にあると仮定する追跡バーコードの位置から大口ラベルもしくは複写式伝票上において住所領域が表示される典型的な位置を推定し、推定した位置に対してＯＣＲを行うことにより、郵便番号および住所を読み取る。
図示するように宛先認識装置１０は、画像入力部１１と、バーコード読取検知部１２と、仕分け番号読取部１３と、大口ラベル識別部１４と、追跡バーコード利用部１５と、を備える。
画像入力部１１は、一次元スキャナなどで小包の画像（小包画像）を取り込む。
バーコード読取検知部１２は、小包の画像の中からバーコードを検出して、バーコードを読み取って仕分け番号を取得する。また、バーコード読取検知部１２は、バーコードを読み取ることができない場合、バーコードらしき画像（矩形部分）の座標位置およびその傾き（回転角度）を求める。
仕分け番号読取部１３は、矩形部分の座標位置および傾きに基づいて、小包画像を回転させ、矩形部分を基準として矩形部分の上側と右側の領域をＯＣＲで読む機能と、その後さらに小包画像の上下を回転させてから再び矩形部分の上側及び右側の領域をＯＣＲで読む機能を有する。
大口ラベル識別部１４は、予め登録された差出し頻度の多い代表的な大口顧客の複数の大口ラベルの画像に基づいて、画像入力部１１が入力した小包画像に対し、ラベル画像のパターンマッチング処理を行う。そして、大口ラベル識別部１４は、マッチングできた時の位置と角度を取得し、その角度分だけ、元の小包画像を回転し、予め登録しておいた大口ラベル画像とともに登録しておいた仕分け番号領域及び住所領域の位置座標を参照し、その領域内に対してＯＣＲ処理を行う。大口ラベル識別部１４は、これにより仕分け番号や住所を読み取る。
追跡バーコード利用部１５は、バーコード読取検知部１２が追跡バーコードの読み取りに成功した場合、入力した小包画像内には、必ず大口ラベルもしくは複写式伝票が含まれていると仮定して、追跡バーコードと大口ラベルや複写式伝票における住所領域との相対的な位置関係に基づいて住所情報の読み取りを行う。より具体的には、追跡バーコード利用部１５は、追跡バーコードの読み取りに成功した場合、追跡バーコードの傾きの角度分だけ、入力した元の小包画像を回転させる。そして、追跡バーコード利用部１５は、大口ラベルもしくは複写式伝票上にあると仮定する追跡バーコードの位置から大口ラベルもしくは複写式伝票上において住所領域が表示される典型的な位置を推定し、推定した位置に対してＯＣＲを行うことにより、郵便番号および住所を読み取る。
次にこれらの機能部による宛先認識処理の大まかな流れを説明する。
（処理１）
まず、画像入力部１１は、小包を撮像した小包画像を取得する。
（処理１）
まず、画像入力部１１は、小包を撮像した小包画像を取得する。
（処理２）
次にバーコード読取検知部１２が、小包画像から何らかのバーコードの読み取り、または、バーコードが表示された矩形部分の座標位置およびその傾きを求める。
次にバーコード読取検知部１２が、小包画像から何らかのバーコードの読み取り、または、バーコードが表示された矩形部分の座標位置およびその傾きを求める。
（処理３）
矩形部分の座標位置等を読み取った場合、仕分け番号読取部１３は、小包画像を、矩形部分の座標位置および傾きに基づいて回転させ、矩形部分を基準にして矩形部分の上側と右側の領域をＯＣＲで読取る。さらに仕分け番号読取部１３は、小包画像の上下を回転させてから再び矩形部分の上側及び右側の領域をＯＣＲで読取る。
矩形部分の座標位置等を読み取った場合、仕分け番号読取部１３は、小包画像を、矩形部分の座標位置および傾きに基づいて回転させ、矩形部分を基準にして矩形部分の上側と右側の領域をＯＣＲで読取る。さらに仕分け番号読取部１３は、小包画像の上下を回転させてから再び矩形部分の上側及び右側の領域をＯＣＲで読取る。
（処理４）
次に大口ラベル識別部１４は、ラベル画像のパターンマッチング処理を行って、仕分け番号領域及び住所領域が表示される位置を推定し、推定した位置に対してＯＣＲ処理を行うことにより、仕分け番号や住所を読み取る。
次に大口ラベル識別部１４は、ラベル画像のパターンマッチング処理を行って、仕分け番号領域及び住所領域が表示される位置を推定し、推定した位置に対してＯＣＲ処理を行うことにより、仕分け番号や住所を読み取る。
（処理５）
追跡バーコード利用部１５は、バーコード読取検知部１２が追跡バーコードの読取りに成功した場合、追跡バーコードの傾きの角度分だけ、入力した小包画像を回転させ、住所領域を推定し、その推定した住所領域に対してＯＣＲ処理を行うことにより、郵便番号および住所を読み取る。
追跡バーコード利用部１５は、バーコード読取検知部１２が追跡バーコードの読取りに成功した場合、追跡バーコードの傾きの角度分だけ、入力した小包画像を回転させ、住所領域を推定し、その推定した住所領域に対してＯＣＲ処理を行うことにより、郵便番号および住所を読み取る。
次に上記の（処理１）から（処理５）順に処理を行って宛先情報を認識することの意味、メリットについて説明を行う。
宛先情報は、小包画像内の広い範囲の不特定の場所に自由に回転した状態で存在する。一定値でない仕分け番号の文字列や宛名の文字列を直接検知するのは画像処理上、一般的に難しい。一方で同じ条件下でも、バーコードの検知に関しては、バーコードはバー列が一定範囲内に連続して並んでいるという特徴と、バーコード全体の形状が細長い矩形であることから、バーコードの位置と回転角度は検出しやすい。実際の小包区分機でも、トンネル式バーコードリーダの仕分けバーコードあるいは追跡バーコードの読取り率は７０％〜９０％に達し、またその理由により小包には一次元バーコードが付定されている。従ってまずもっとも読取率が高いバーコード読取処理を、最初に行う（処理２）。
宛先情報は、小包画像内の広い範囲の不特定の場所に自由に回転した状態で存在する。一定値でない仕分け番号の文字列や宛名の文字列を直接検知するのは画像処理上、一般的に難しい。一方で同じ条件下でも、バーコードの検知に関しては、バーコードはバー列が一定範囲内に連続して並んでいるという特徴と、バーコード全体の形状が細長い矩形であることから、バーコードの位置と回転角度は検出しやすい。実際の小包区分機でも、トンネル式バーコードリーダの仕分けバーコードあるいは追跡バーコードの読取り率は７０％〜９０％に達し、またその理由により小包には一次元バーコードが付定されている。従ってまずもっとも読取率が高いバーコード読取処理を、最初に行う（処理２）。
また、本実施形態では、バーコード読み取りに失敗した場合でも、バーコードの位置と傾きの検出を行う（処理２）。そして、その情報を利用して仕分け番号の認識処理を行うことを特徴とする（処理３）。バーコードの読み取りの失敗には、そもそもバーコードのバー列を見つけられない場合と、バー列を検知してバーコードの読み取り処理を行ったときにスタートバー、ストップバーが見つけられない、あるいはバー列を読み取った後チェックディジットが合わないなどのデコード処理に失敗する場合とがある。後者の場合、少なくともバー列らしきものの矩形部分の位置と、１８０°上下の反転判別は不明であるが、その矩形部分の±９０°範囲の回転角度は求めることができ、この結果を（処理３）で利用する。本実施形態では、バーコードの読み取りには失敗したが、バー列の矩形部分の座標と回転角度が特定できた場合を、バーコードを検知したと称する。
（処理３）では、（処理２）でバーコードを検知した場合、バーコードの矩形部分の座標と回転角度に基づいて、バーコードが印字されたと思われる矩形部分を中心に回転角度分だけ（±９０°範囲の回転を０°とする方向に）小包画像を回転する。そして回転した後の矩形部分を対象にしてバーコードのＯＣＲ読み取りを行う。このとき矩形部分のバーコードが、例えば図１６で示す複写式伝票上の追跡バーコード２Ｃであるか、図１６で示す小ラベル上の仕分けバーコード２Ｂであるか、図１４、図１５で示す大口ラベル上の仕分けバーコード１Ｂあるいは追跡バーコード１Ｃ，１Ｄであるかは判定できていない。
大口ラベルの宛名や住所が表示される位置は、さまざまであって、大口ラベル上に検知されたバーコードの矩形だけで、宛名や住所の領域を判定するためには、領域範囲を広くとらなくてはならない、しかし宛名等が表示された対象領域の大きさに対してＯＣＲ適用領域を広くとると、そのような広い領域内に含まれてしまう宛名ではない模様や背景を宛名と誤読する可能性を高め、認識処理上好ましくない。また、図１６で示す複写式伝票は、種類の多い大口ラベルと比べて一般的に伝票の種類が非常に少ないために、バーコードの位置と宛名や郵便番号との相対位置はほぼ固定的ではあるが、複写式伝票の場合、宛名が手書きで書かれていることが多く、手書き用のＯＣＲを適用することになる。しかし、手書き用のＯＣＲは印活用のＯＣＲと比べて認識率が低く、誤読の可能性が高い為、複写式伝票のバーコードであると確定しない状態で、ある領域に手書き用のＯＣＲを適用すると誤読の可能性を高める。
しかし、小ラベルの仕分け番号は、仕分けバーコードの上側の近傍にあること、および大口ラベルの仕分け番号は仕分けバーコードの右側の近傍にあること、に着目すると、この２つの場合は、読取走査領域を狭く絞ることができるので、余計な背景が大きく認識領域に入ることは無く、比較的、安定したＯＣＲ認識が可能である。また、仕分け番号は印活数字でありＯＣＲ認識上、認識し易い対象であることから、仕分け番号用のＯＣＲは誤読率を低減できる。
そこで、本実施形態では、誤読対策として、まず、仕分け番号を対象としてＯＣＲを行う。すなわち、ＯＣＲ読取り領域の妥当性を確認するために、まず撮像した画像領域内でラベリング処理を行い、ラベルを付した個々の対象の高さと幅のサイズを測定して、仕分け番号の文字サイズと近似しているかを確認する。近似している場合、ＯＣＲの仕分け番号読取処理を行う。近似していない場合は仕分け番号が存在している可能性が低い為、ＯＣＲの誤読を避けるために、仕分け番号のＯＣＲによる読み取り処理を行わない。
より具体的には、（処理３）では、仕分け番号読取部１３は、ＯＣＲの読み取り対象である仕分け番号がバーコードの近傍に存在するという特徴を利用して、仕分け番号が存在する確率が高い領域を特定する。すなわち、仕分け番号読取部１３は、バーコードが小ラベルの仕分けバーコードである可能性を考慮して、バーコード領域の上側の領域を仕分け番号の表示領域として注目する。また、仕分け番号読取部１３は、バーコードが大口ラベルの仕分けバーコードである可能性を考慮して、バーコード領域の右側の領域を仕分け番号の表示領域として注目する。仕分け番号読取部１３は、これら注目した領域に一定の範囲内の密度の濃度画像が存在するかどうかを確認し、存在が確認できたら、注目した領域に対してＯＣＲによる読み取り処理を行う。
より具体的には、（処理３）では、仕分け番号読取部１３は、ＯＣＲの読み取り対象である仕分け番号がバーコードの近傍に存在するという特徴を利用して、仕分け番号が存在する確率が高い領域を特定する。すなわち、仕分け番号読取部１３は、バーコードが小ラベルの仕分けバーコードである可能性を考慮して、バーコード領域の上側の領域を仕分け番号の表示領域として注目する。また、仕分け番号読取部１３は、バーコードが大口ラベルの仕分けバーコードである可能性を考慮して、バーコード領域の右側の領域を仕分け番号の表示領域として注目する。仕分け番号読取部１３は、これら注目した領域に一定の範囲内の密度の濃度画像が存在するかどうかを確認し、存在が確認できたら、注目した領域に対してＯＣＲによる読み取り処理を行う。
このように（処理３）では、文字認識ＯＣＲを小包のような複雑な背景を持つ画像に全面的に適用すると、誤認識が生じやすい為、仕分け番号の存在する確率が高い領域に絞り込む工夫を行う。また、検知したバーコードの右側（大口ラベルの仕分け番号が表示されていると推定される箇所）で仕分け番号が読み取れた場合は、住所情報を、その仕分け番号の画像の下方の領域からＯＣＲによって読み取る。これは大口ラベルの様態として、仕分け番号が印字された箇所の直下に宛名住所記載が多いという監察結果に基づく。この領域で住所を認識し、読み取った仕分け番号と照合することで、仕分け番号の数字の誤読を減らすことができる。このように（処理３）は、（処理２）のバーコード読取処理に次いで、誤読の少ない安定したＯＣＲによる認識処理である。従って、本実施形態では、（処理２）の後に（処理３）を行う。
また、（処理３）では、読み取り対象領域と小包画像の回転角度を合わせる為、小包画像を検知されたバーコードの回転角度で回転させるが、バーコード検知領域の右側に仕分け番号があると仮定して読む場合、すなわち大口ラベルであることを仮定する場合、もし一方で追跡バーコードが読めていれば、まず追跡バーコードの傾き角度で画像回転を行う。これは大口ラベルの場合、仕分け番号と追跡バーコードは同じラベル上に印字されており、両者は平行な関係にあるため、追跡バーコードの回転角度に合わせて画像を回転させると、大口ラベルの仕分け番号の読み取りを意図する場合には、仕分け番号領域の傾きずれが少なくなる利点があり、認識性能の向上させることができるためである。なお、追跡バーコードを対象とするのは、仕分けバーコードが読めた場合には、（処理２）で認識処理を完了することができるためである。
次の（処理４）では、大口ラベルの検出に、入力した小包画像の自由な回転を含む何らかのパターンマッチング手法を適用することを前提としている。このパターンマッチング手法は一般的に事前にマッチング対象画像、すなわち本発明の場合は大口ラベルの画像を複数登録しておくが、大口ラベルの様態は、差出人である大口の業者が個々にラベルを作成するため、すべての種類のラベルを事前に登録することはできない。従って、パターンマッチング処理の性能が理想的であると仮定しても、小包の表面に必ず表示される仕分けバーコードや追跡バーコードと比べると、大口ラベルの検出は難しいものとなる。従って、（処理４）は、（処理３）に比べて検出性能が劣ると考えられ、認識の優先順序として（処理３）の後に行う。
ところで、パターンマッチング処理は、対象が小包のような大きい対象物であって、被検索対象である大口ラベルもまた、面積サイズが大きい為、両者の処理の相乗により、処理時間が非常に大きく、小包の区分までに処理が間に合わない可能性がある。そこで本実施形態では、追跡バーコードを検知した場合は、追跡バーコードの位置の近傍からパターンマッチングを行う工夫を行う（工夫１）。また、回転角度の範囲が自由なパターンマッチングでは、マッチングの為に登録した参照用パターン画像を３６０°回転させながらマッチングする必要があるが、追跡バーコードを検知した場合は、追跡バーコードに対応する矩形部分の回転角度に対して、平行する方向に大口ラベルがあると推定できるため、矩形部分の回転角度の近傍に絞って探索し、パターンマッチング時の画像の回転角度範囲を絞るという工夫を行う（工夫２）。これにより、パターンマッチングに要する位置走査範囲、回転走査範囲を絞り、結果的に処理時間を大幅に低減することができる。
また、大口ラベルは、図１４に示すように、追跡バーコードと送付先の宛名と住所および差出人の記載欄が２つずつあり、それぞれに同じ情報が記載されているという様態の場合が多い。これは、大口ラベルは２枚のラベルに分割でき、一方のラベルを控えとして利用するためである。大口ラベルの小包への貼り方を観察すると、大口ラベルは小包に貼られるとき通常は当然荷物の上面なり平面上に貼られるが、小包のサイズが小さいと、大口ラベルを２つに折り小包の稜線に跨いで２面に貼られることがある。このように２面に跨いで貼られる場合、大口ラベルは無作為に折られるわけではなく、上述のような２枚分のラベルで分かれるように折られ、少なくとも１つの宛名領域は１つの平面上に表示されるように貼られ方をされることが多い。このように小包の梱包箱の稜線に跨いで半分に折って貼られた場合、画像上は、大口ラベルの元の姿が全部画像に写っていないため、登録時の大口ラベルとは大きさも形態も類似せず、パターンマッチングで合致することは無い。そこで、本実施形態では、上述の観察結果に基づいて、大口ラベルの照合用の画像登録時に、ラベル全体の画像の登録とともに、意図的に大口ラベルの半分だけの領域を指定した画像も登録する工夫を行う。これにより、前述のような稜線を半分に跨いで貼られた大口ラベルに対しても、パターンマッチング処理を適用することができる。
次に（処理５）について説明する。（処理２）のバーコード認識処理で、仕分けバーコードと追跡バーコードの両方の認識を行うが、ここで仕分けバーコードが読めた場合は、追跡バーコードの読みの有無にかかわらず、仕分けバーコードに格納された仕分番号で区分が可能である。一方で追跡バーコードのみ読めた場合は、その追跡バーコードは、複写式伝票上の追跡バーコードか、大口ラベル上の追跡バーコードのどちらかである可能性が高い。前提として、小包上に貼付されている宛先ラベルは複写式伝票と大口ラベルのどちらかであるが、複写式伝票は必ず１つの追跡バーコードが含まれ、一方、大口ラベルには同じ２つの追跡バーコードが含まれるとする。大口ラベルに追跡バーコードが２つ含まれる理由は、多くの大口ラベルは、前述したように２枚の正方形のラベルが上下あるいは左右に連になって構成されており、その内の１枚を剥がして控えとして使用されるためである。図１４に示すラベルは、宛名と追跡バーコードが上下に連なった大口ラベル例である。図１５に示すラベルは、宛名と追跡バーコードが左右に連なった大口ラベル例である。このように大口ラベルの場合、２つの同じ追跡バーコードが画像上、上下に並んでいる様態と、左右水平に並んでいる様態があり、これらの様態の大口ラベルが非常に多い。この性質を利用すると、画像内で１つの追跡バーコードが読めた場合は、複写式伝票と推定し、２つの同じ追跡バーコードが比較的近い距離内で読めた場合は、それは大口ラベルの追跡バーコードであると推定できる。
複写式伝票と推定した場合、複写式伝票は書式が一定であるため、追跡バーコードの位置から住所および郵便番号領域を推定しＯＣＲで住所や郵便番号を読取ることで仕分け先の情報を得ることができる。また。複写式伝票は、伝票上の決まった位置に１２桁の追跡番号が印字されている。従って一つの追跡バーコードが読めた場合、それが複写式伝票上の追跡バーコードであるかを、追跡バーコード位置から推定される所定の追跡番号領域に対して、ＯＣＲで１２桁の追跡番号の読取りを行うことにより、ＯＣＲが読み取った数字が完全に、あるいはある程度の桁が追跡バーコードに含まれる追跡番号と一致すれば、複写式伝票であると信頼できる。
一方で大口ラベルと判断した場合は、２つの追跡バーコードが画像上、上下に並んでいる場合と、左右水平に並んでいる場合とで住所記載領域の位置に特徴がある。大口ラベルの様態を観察すると、前者の場合、上側にある追跡バーコードの上方に住所が印刷されている場合が多く、後者の場合、左側の追跡バーコードの上方に住所が印刷されている場合が多い。また、追跡バーコードには追跡情報の他に小包配送業者の定めるサービス種別が含まれている場合がある。一例が、ある指定時間通りに小包を顧客に届ける時間サービスであり、このサービスを利用するときは専用の時間サービス用のラベルを使用する。その専用ラベルの場合、追跡バーコードには、そのサービスであることを示す種別コードが含まれている。追跡バーコードの読取りで、そのようなサービス種別が存在した場合、サービス種別からそのサービスで使用する専用のラベルを特定することで、仕分け番号や住所が含まれる領域を特定することが可能である。
これら複写式伝票、大口ラベルの様態に基づく、様々な判断で住所領域を推定し、ＯＣＲで印刷住所を読むことで仕分け先情報を得ることができる。このように（処理５）は、仕分けバーコードが読めず、仕分け番号も読めず、大口ラベルも特定できない状況下で、追跡バーコード読取情報のみで推定により住所領域を求める手段である。ただし追跡バーコードと仕分け番号の相対位置に顕著な特徴は無く、仕分け番号の領域推定はできないため、（処理５）では、仕分け番号のＯＣＲ読取りではなく、宛名住所のＯＣＲ読み取りを適用し、読み取った宛名住所から区分を行う。あるいは、読み取った住所からデータテーブルを参照して仕分け番号を求め、この仕分け番号によって区分を行う。
このように処理２〜処理５の順序は最も推定要素が少ない処理から、推定要素が多い処理の順序であり、本実施形態の宛先認識方法では、各種読み取り処理を、同じＯＣＲを使用するとしても誤読の可能性が低い方法から順に行うウォーターフォール方式を採用する。これにより、効率よく仕分け番号等を読み取ることができる。
＜実施例＞
以下に図２から図１５を用いて、光学画像読み取り機を持つ区分機で小包を自動区分するシステムの例を用いて、本実施形態の宛先認識方法についてさらに詳しく説明する。
図２は、本発明の一実施形態による小包自動区分システムの一例を示す図である。
図２に示すように、小包自動区分システム１は、搬送制御装置２００と、画像入力カメラ３００と、画像入力装置４００と、小包用仕分け先認識装置５００と、区分先決定機６００と、を備える。
以下に図２から図１５を用いて、光学画像読み取り機を持つ区分機で小包を自動区分するシステムの例を用いて、本実施形態の宛先認識方法についてさらに詳しく説明する。
図２は、本発明の一実施形態による小包自動区分システムの一例を示す図である。
図２に示すように、小包自動区分システム１は、搬送制御装置２００と、画像入力カメラ３００と、画像入力装置４００と、小包用仕分け先認識装置５００と、区分先決定機６００と、を備える。
搬送制御装置２００は、小包１００を搬送する。なお、小包１００には、仕分け番号、宛名住所、仕分けバーコード、追跡バーコードが印刷されたラベルや伝票が貼り付けられている。
画像入力カメラ３００は、搬送中の小包１００を撮像し、濃淡画像を撮像する。
画像入力装置４００は、画像入力カメラ３００から小包１００を撮像した濃淡画像を取得する。画像入力カメラ３００が取得した濃淡画像は、例えば、０〜２５５の２５６階調の濃淡を示す複数の画素で構成される画像を示す画像データである。階調は、０が黒を示し、数値が２５５に近づくにつれて画像が明るくなる（白に近づく）ことを示す。
小包用仕分け先認識装置５００は、小包の仕分け番号を画像処理により認識する。
区分先決定機６００は、小包用仕分け先認識装置５００が認識した仕分け番号に基づいて、宛先別に用意された複数の容器７００の中から適切な容器７００へ小包１００を収容する。
画像入力カメラ３００は、搬送中の小包１００を撮像し、濃淡画像を撮像する。
画像入力装置４００は、画像入力カメラ３００から小包１００を撮像した濃淡画像を取得する。画像入力カメラ３００が取得した濃淡画像は、例えば、０〜２５５の２５６階調の濃淡を示す複数の画素で構成される画像を示す画像データである。階調は、０が黒を示し、数値が２５５に近づくにつれて画像が明るくなる（白に近づく）ことを示す。
小包用仕分け先認識装置５００は、小包の仕分け番号を画像処理により認識する。
区分先決定機６００は、小包用仕分け先認識装置５００が認識した仕分け番号に基づいて、宛先別に用意された複数の容器７００の中から適切な容器７００へ小包１００を収容する。
図３は、本発明の一実施形態による小包用仕分け先認識装置のハードウェア構成例を示す図である。
図３に示すように小包用仕分け先認識装置５００は、ＣＰＵ（Central Processing Unit）５１、ＲＯＭ（Read Only Memory）５２、ＲＡＭ（Random Access Memory）５３、ＨＤＤ（Hard Disk Drive）５４、インタフェース５５の各ハードウェア構成を一例として備えてよい。インタフェース５５は例えば液晶タッチパネルやボタンなどである。小包用仕分け先認識装置５００はその他のハードウェアをさらに備えて構成されてよい。
図３に示すように小包用仕分け先認識装置５００は、ＣＰＵ（Central Processing Unit）５１、ＲＯＭ（Read Only Memory）５２、ＲＡＭ（Random Access Memory）５３、ＨＤＤ（Hard Disk Drive）５４、インタフェース５５の各ハードウェア構成を一例として備えてよい。インタフェース５５は例えば液晶タッチパネルやボタンなどである。小包用仕分け先認識装置５００はその他のハードウェアをさらに備えて構成されてよい。
図３の小包自動区分システム１では、搬送制御装置２００によって搬送される小包１００の画像を画像入力カメラ３００が撮像し、その濃淡画像（小包画像）を画像入力装置４００へ出力する。画像入力装置４００は、取得した濃淡画像を小包用仕分け先認識装置５００に入力させ、小包用仕分け先認識装置５００が所定の時間内で出力する仕分け番号により、区分先決定機６００が区分先を決定し、搬送制御装置２００が小包を複数の容器７００の内の一つに収容することにより、小包の自動区分を実現する。つまり、図３の小包自動区分システム１では、小包用仕分け先認識装置５００が、図１等で説明した宛先認識装置１０に相当し、上記の一連の処理により小包の仕分け番号を認識する。
次に小包用仕分け先認識装置５００について説明する。
図４は、本発明の一実施形態による小包用仕分け先認識装置の一例を示す図である。
図４に示すように小包用仕分け先認識装置５００は、画像バッファ部５０１と、バーコード読取検知部５０２と、読取結果判定部５０３と、仕分け番号読取部５０４と、大口ラベル識別部５０５と、追跡バーコード利用部５０６と、結果出力部５０７と、大口ラベル登録部５０８と、大口ラベル記憶部５０９とを備える。
画像バッファ部５０１は、画像入力装置４００から画像を取得し一時的に格納する。
バーコード読取検知部５０２は、画像バッファ部５０１に格納された画像からバーコードの読み取りを行う。また、バーコード読取検知部５０２は、バーコードの矩形部分の位置座標と画像上の回転角度の検出を行う。
読取結果判定部５０３は、仕分け番号の読み取り結果によって、仕分け先認識処理を制御する。
仕分け番号読取部５０４は、画像バッファ部５０１に格納された画像とバーコード読取検知部５０２が検出した矩形部分の位置座標と回転角度の情報に基づいて、ＯＣＲによる仕分け番号の読み取りを行う。
大口ラベル識別部５０５は、パターンマッチングにより、ＯＣＲによる大口ラベルの仕分け番号と住所の読み取りを行う。
追跡バーコード利用部５０６は、画像バッファ部５０１に格納された画像とバーコード読取検知部５０２が検出した矩形部分の位置座標と回転角度の情報に基づいて、大口ラベルあるいは複写式ラベルの住所領域から、ＯＣＲによる宛名や住所の読み取りを行う。
結果出力部５０７は、読み取り結果の仕分け番号などを区分先決定機６００へ出力する。
大口ラベル登録部５０８は、パターンマッチングに用いる大口ラベルの参照用画像を大口ラベル記憶部５０９に登録する。
大口ラベル記憶部５０９は、大口ラベル画像を記憶する。
図４は、本発明の一実施形態による小包用仕分け先認識装置の一例を示す図である。
図４に示すように小包用仕分け先認識装置５００は、画像バッファ部５０１と、バーコード読取検知部５０２と、読取結果判定部５０３と、仕分け番号読取部５０４と、大口ラベル識別部５０５と、追跡バーコード利用部５０６と、結果出力部５０７と、大口ラベル登録部５０８と、大口ラベル記憶部５０９とを備える。
画像バッファ部５０１は、画像入力装置４００から画像を取得し一時的に格納する。
バーコード読取検知部５０２は、画像バッファ部５０１に格納された画像からバーコードの読み取りを行う。また、バーコード読取検知部５０２は、バーコードの矩形部分の位置座標と画像上の回転角度の検出を行う。
読取結果判定部５０３は、仕分け番号の読み取り結果によって、仕分け先認識処理を制御する。
仕分け番号読取部５０４は、画像バッファ部５０１に格納された画像とバーコード読取検知部５０２が検出した矩形部分の位置座標と回転角度の情報に基づいて、ＯＣＲによる仕分け番号の読み取りを行う。
大口ラベル識別部５０５は、パターンマッチングにより、ＯＣＲによる大口ラベルの仕分け番号と住所の読み取りを行う。
追跡バーコード利用部５０６は、画像バッファ部５０１に格納された画像とバーコード読取検知部５０２が検出した矩形部分の位置座標と回転角度の情報に基づいて、大口ラベルあるいは複写式ラベルの住所領域から、ＯＣＲによる宛名や住所の読み取りを行う。
結果出力部５０７は、読み取り結果の仕分け番号などを区分先決定機６００へ出力する。
大口ラベル登録部５０８は、パターンマッチングに用いる大口ラベルの参照用画像を大口ラベル記憶部５０９に登録する。
大口ラベル記憶部５０９は、大口ラベル画像を記憶する。
図５は、本発明の一実施形態による小包用仕分け先認識処理の一例を示すフローチャートである。
まず、画像バッファ部５０１は、画像入力装置４００から画像を取得する（ステップＳ１１）。画像バッファ部５０１は、取得した小包画像を区分先決定機６００によって小包の区分先が決定されるまで、取得した小包画像を一時的に格納する。
まず、画像バッファ部５０１は、画像入力装置４００から画像を取得する（ステップＳ１１）。画像バッファ部５０１は、取得した小包画像を区分先決定機６００によって小包の区分先が決定されるまで、取得した小包画像を一時的に格納する。
次にバーコード読取検知部５０２は、画像バッファ部５０１から画像を取得し、バーコードの検知と読み取りを行う（ステップＳ１２）。バーコード読取検知部５０２は、バーコード（追跡バーコードまたは仕分けバーコード）を検知した場合、バーコードの矩形部分の位置座標と画像上の回転角度を、読取結果判定部５０３へ出力する。また、バーコード読取検知部５０２は、バーコードを読み取った場合、バーコードの読取り結果を、読取結果判定部５０３へ出力する。また、バーコード読取検知部５０２は、バーコード検知にも失敗した場合は検知不能を示すリジェクト信号を読取結果判定部５０３へ出力する。ステップＳ１２は、上記の（処理２）に相当する。
次に読取結果判定部５０３は、バーコード読取検知部５０２から取得した情報に基づいて、仕分け番号は読み取れたかどうかを判定する（ステップＳ１３）。仕分け番号が読取れた場合（ステップＳ１３；Ｙｅｓ）、つまり、ステップＳ１２で仕分けバーコードの読み取りに成功した場合、後述のステップＳ１９へ進む。仕分け番号が読み取れない場合（ステップＳ１３；Ｎｏ）、仕分け番号読取部５０４は、画像バッファ部５０１から小包画像を取得し、バーコード読取検知部５０２から矩形部分の位置座標と回転角度を取得し、ＯＣＲで仕分け番号を読み取る（ステップＳ１４）。仕分け番号読取部５０４は、その読取結果（仕分け番号）あるいは、読取失敗を示すリジェクト信号を読取結果判定部５０３へ出力する。ステップＳ１４は、上記の（処理３）に相当する。
次に読取結果判定部５０３は、仕分け番号読取部５０４から取得した情報に基づいて、仕分け番号は読み取れたかどうかを判定する（ステップＳ１５）。仕分け番号が読取れた場合（ステップＳ１５；Ｙｅｓ）、後述のステップＳ１９へ進む。仕分け番号が読取れない場合（ステップＳ１５；Ｎｏ）、大口ラベル識別部５０５は、画像バッファ部５０１から画像を、バーコード読取検知部５０２が検知した追跡バーコードの矩形部分の位置座標と回転角度の情報を取得して、パターンマッチングにより仕分け番号等を読み取る（ステップＳ１６）。バーコード読取検知部５０２は、読み取った仕分け番号、あるいは、仕分け番号を読み取れなかった場合、リジェクト信号を読取結果判定部５０３へ出力する。ステップＳ１６は、上記の（処理４）に相当する。
次に読取結果判定部５０３は、大口ラベル識別部５０５から取得した情報に基づいて、仕分け番号は読み取れたかどうかを判定する（ステップＳ１７）。仕分け番号が読み取れた場合（ステップＳ１７；Ｙｅｓ）、後述のステップＳ１９へ進む。仕分け番号が読み取れない場合（ステップＳ１７；Ｎｏ）、追跡バーコード利用部５０６は、追跡バーコードを利用して仕分け番号読取る（ステップＳ１８）。具体的には、追跡バーコード利用部５０６は、画像バッファ部５０１から画像を取得し、バーコード読取検知部５０２から追跡バーコードの矩形位置と回転角度情報を取得して、大口ラベルあるいは複写式ラベルの住所を読み取る。追跡バーコード利用部５０６は、読取結果を結果出力部５０７へ出力する。ステップＳ１８は、上記の（処理５）に相当する。
次に結果出力部５０７が読取結果を出力する（ステップＳ１９）。結果出力部５０７は、読み取り結果の仕分け番号、または、リジェクト信号を区分先決定機６００へ出力する。区分先決定機６００は、小包用仕分け先認識装置５００から取得した仕分け番号に基づいて、区分先の容器７００の内１つを決定する。搬送制御装置２００は、決定した区分先に従って小包１００を区分する。
次に結果出力部５０７が読取結果を出力する（ステップＳ１９）。結果出力部５０７は、読み取り結果の仕分け番号、または、リジェクト信号を区分先決定機６００へ出力する。区分先決定機６００は、小包用仕分け先認識装置５００から取得した仕分け番号に基づいて、区分先の容器７００の内１つを決定する。搬送制御装置２００は、決定した区分先に従って小包１００を区分する。
次に図６を用いてステップＳ１２の処理について詳しく説明する。
図６は、本発明の一実施形態によるバーコード検知および読取処理の一例を示すフローチャートである。
まず、バーコード読取検知部５０２は、画像バッファ部５０１から小包画像を取得してバーコードの検知と読み取りを行う（ステップＳ２１）。バーコード読取検知部５０２は、小包画像上にある仕分けバーコードおよび追跡バーコードの検知と読み取りを行う。次に、バーコード読取検知部５０２は、ステップＳ２１の処理で、仕分け番号が読み取れたかどうかを判定する（ステップＳ２２）。仕分け番号が読取れた場合（ステップＳ２２；Ｙｅｓ）、バーコード読取検知部５０２は、仕分け番号を出力情報に設定する（ステップＳ２３）。そして、ステップＳ２９の処理に進む。この場合、仕分け番号が読み取れているので、認識処理は終了である。
図６は、本発明の一実施形態によるバーコード検知および読取処理の一例を示すフローチャートである。
まず、バーコード読取検知部５０２は、画像バッファ部５０１から小包画像を取得してバーコードの検知と読み取りを行う（ステップＳ２１）。バーコード読取検知部５０２は、小包画像上にある仕分けバーコードおよび追跡バーコードの検知と読み取りを行う。次に、バーコード読取検知部５０２は、ステップＳ２１の処理で、仕分け番号が読み取れたかどうかを判定する（ステップＳ２２）。仕分け番号が読取れた場合（ステップＳ２２；Ｙｅｓ）、バーコード読取検知部５０２は、仕分け番号を出力情報に設定する（ステップＳ２３）。そして、ステップＳ２９の処理に進む。この場合、仕分け番号が読み取れているので、認識処理は終了である。
仕分け番号が読取れなかった場合（ステップＳ２２；Ｎｏ）、バーコード読取検知部５０２は、追跡バーコードの読取りができたかどうかを判定する（ステップＳ２４）。１つまたは複数の追跡バーコードが読取れた場合（ステップＳ２４；Ｙｅｓ）、バーコード読取検知部５０２は、読み取れた全ての追跡バーコードの矩形部分の位置座標と回転角度（３６０°）を出力情報として設定する（ステップＳ２５）。そして、ステップＳ２６の処理に進む。追跡バーコードが読取れなかった場合（ステップＳ２４；Ｎｏ）、ステップＳ２６の処理に進む。
次にバーコード読取検知部５０２は、バーコードの検知ができたかどうかを判定する（ステップＳ２６）。バーコードの検知ができた場合（ステップＳ２６；Ｙｅｓ）、バーコード読取検知部５０２は、検知できた全てのバーコードの矩形部分の位置座標と回転角度（３６０°）を出力情報に設定する（ステップＳ２７）。そして、ステップＳ２９の処理に進む。なお、ステップＳ２４で読み取りができなかった場合は、バーコードを読めていないので３６０°回転方向は分からず、出力する回転角度範囲は１８０°（±９０°）になる。追跡バーコードが読取れなかった場合（ステップＳ２６；Ｎｏ）、バーコード読取検知部５０２は、出力情報に検知不能を設定し（ステップＳ２８）、ステップＳ２９の処理に進む。ステップＳ２９では、バーコード読取検知部５０２は、出力情報に設定された値を出力する。
出力情報に設定された値には、次のいずれかになる。
１．仕分け番号
２．追跡バーコードの矩形部分の位置座標と３６０°回転角度。大口ラベルには同じ追跡バーコードが複数印刷されている場合があるので、複数出力する場合がある。
３．検知したバーコードの矩形部分の位置座標と１８０°回転角度。複数出力する場合がある。
４．「２」と「３」の両方
５．検知不能
「１．」または「５．」の場合、バーコード読取検知部５０２は、設定した出力情報（仕分け番号）を結果出力部５０７と読取結果判定部５０３に出力する。「１．」の場合、結果出力部５０７は、出力情報に設定された仕分け番号を、区分先決定機６００へ出力する。「５．」の場合、人手による区分け等を行って対処する。
「２．」〜「４．」の場合、バーコード読取検知部５０２は、出力情報を仕分け番号読取部５０４と読取結果判定部５０３へ出力する（ステップＳ２９）。なお、仕分け番号読取部５０４へ出力したバーコードの矩形部分の位置座標と回転角度の情報を、バーコード検知情報と呼ぶ。
１．仕分け番号
２．追跡バーコードの矩形部分の位置座標と３６０°回転角度。大口ラベルには同じ追跡バーコードが複数印刷されている場合があるので、複数出力する場合がある。
３．検知したバーコードの矩形部分の位置座標と１８０°回転角度。複数出力する場合がある。
４．「２」と「３」の両方
５．検知不能
「１．」または「５．」の場合、バーコード読取検知部５０２は、設定した出力情報（仕分け番号）を結果出力部５０７と読取結果判定部５０３に出力する。「１．」の場合、結果出力部５０７は、出力情報に設定された仕分け番号を、区分先決定機６００へ出力する。「５．」の場合、人手による区分け等を行って対処する。
「２．」〜「４．」の場合、バーコード読取検知部５０２は、出力情報を仕分け番号読取部５０４と読取結果判定部５０３へ出力する（ステップＳ２９）。なお、仕分け番号読取部５０４へ出力したバーコードの矩形部分の位置座標と回転角度の情報を、バーコード検知情報と呼ぶ。
次に図７を用いてステップＳ１４の処理について詳しく説明する。
図７は、本発明の一実施形態による仕分け番号読取処理の一例を示すフローチャートである。
まず、仕分け番号読取部５０４が、バーコード検知情報を取得する（ステップＳ３１）。また、仕分け番号読取部５０４は、画像バッファ部５０１から小包画像を取得する。
次に仕分け番号読取部５０４が、バーコード検知情報があるかどうかを判定する（ステップＳ３２）。バーコード検知情報が無い場合（ステップＳ３２；Ｎｏ）、仕分け番号読取部５０４は、バーコード検知情報が無しを出力情報に設定する。この場合、認識処理を行わすに処理を終了する。バーコード検知情報がある場合（ステップＳ３２；Ｙｅｓ）、仕分け番号読取部５０４は、小包画像に対し、画像回転処理を行う（ステップＳ３３）。具体的には、仕分け番号読取部５０４は、バーコード検知情報に含まれる検知したバーコードの矩形部分の回転角度を用いて、検知したバーコードの矩形部分を含む近傍画像を回転させる。検知したバーコードが追跡バーコードであった場合、仕分け番号は追跡バーコードに対して平行に配置されているため、この回転処理により、仕分け番号の向きが水平に揃えられる。なお、仕分け番号読取部５０４は、バーコード読取検知部５０２が追跡バーコードを読み取っていたら追跡バーコードの回転角度を用いて、バーコード読取検知部５０２が、バーコードを検知しただけだったら、検知バーコードの回転角度を用いて、その回転角度分だけ小包画像を回転させる。
図７は、本発明の一実施形態による仕分け番号読取処理の一例を示すフローチャートである。
まず、仕分け番号読取部５０４が、バーコード検知情報を取得する（ステップＳ３１）。また、仕分け番号読取部５０４は、画像バッファ部５０１から小包画像を取得する。
次に仕分け番号読取部５０４が、バーコード検知情報があるかどうかを判定する（ステップＳ３２）。バーコード検知情報が無い場合（ステップＳ３２；Ｎｏ）、仕分け番号読取部５０４は、バーコード検知情報が無しを出力情報に設定する。この場合、認識処理を行わすに処理を終了する。バーコード検知情報がある場合（ステップＳ３２；Ｙｅｓ）、仕分け番号読取部５０４は、小包画像に対し、画像回転処理を行う（ステップＳ３３）。具体的には、仕分け番号読取部５０４は、バーコード検知情報に含まれる検知したバーコードの矩形部分の回転角度を用いて、検知したバーコードの矩形部分を含む近傍画像を回転させる。検知したバーコードが追跡バーコードであった場合、仕分け番号は追跡バーコードに対して平行に配置されているため、この回転処理により、仕分け番号の向きが水平に揃えられる。なお、仕分け番号読取部５０４は、バーコード読取検知部５０２が追跡バーコードを読み取っていたら追跡バーコードの回転角度を用いて、バーコード読取検知部５０２が、バーコードを検知しただけだったら、検知バーコードの回転角度を用いて、その回転角度分だけ小包画像を回転させる。
次に仕分け番号読取部５０４は、バーコード検知情報に含まれる検知したバーコードの矩形部分の位置座標に基づいて、そのバーコードの上方の領域を対象としてＯＣＲで仕分け番号を読取る（ステップＳ３４）。検知したバーコードが小ラベルの仕分けバーコードであった場合、仕分けバーコードでの上側の領域に仕分け番号が表示されているため、この処理により、仕分け番号を読み取ることができる。
次に仕分け番号読取部５０４は、ステップＳ３４の処理で、仕分け番号は読み取れたかどうかを判定する（ステップＳ３５）。仕分け番号が読取れた場合（ステップＳ３５；Ｙｅｓ）、仕分け番号読取部５０４は、読み取った仕分け番号を出力情報に設定し、ステップＳ３９５の処理に進む。仕分け番号が読取れなかった場合（ステップＳ３５；Ｎｏ）、仕分け番号読取部５０４は、バーコードの矩形部分の位置座標に基づいて、そのバーコードの右側の領域を対象としてＯＣＲで仕分け番号を読取る（ステップＳ３６）。検知したバーコードがもし大口ラベルの仕分け番号バーコードであった場合、大口ラベルの仕分けバーコードの右側領域に仕分け番号が表示されている場合が多いため、この処理により、仕分け番号を読み取ることができる。
次に仕分け番号読取部５０４は、ステップＳ３４の処理で、仕分け番号は読み取れたかどうかを判定する（ステップＳ３５）。仕分け番号が読取れた場合（ステップＳ３５；Ｙｅｓ）、仕分け番号読取部５０４は、読み取った仕分け番号を出力情報に設定し、ステップＳ３９５の処理に進む。仕分け番号が読取れなかった場合（ステップＳ３５；Ｎｏ）、仕分け番号読取部５０４は、バーコードの矩形部分の位置座標に基づいて、そのバーコードの右側の領域を対象としてＯＣＲで仕分け番号を読取る（ステップＳ３６）。検知したバーコードがもし大口ラベルの仕分け番号バーコードであった場合、大口ラベルの仕分けバーコードの右側領域に仕分け番号が表示されている場合が多いため、この処理により、仕分け番号を読み取ることができる。
次に仕分け番号読取部５０４は、ステップＳ３６の処理で、仕分け番号は読み取れたかどうかを判定する（ステップＳ３７）。仕分け番号が読み取れた場合（ステップＳ３７；Ｙｅｓ）、仕分け番号読取部５０４は、読み取った仕分け番号を出力情報に設定し、ステップＳ３９５の処理に進む。仕分け番号が読取れなかった場合（ステップＳ３７；Ｎｏ）、仕分け番号読取部５０４は、画像回転処理を行う（ステップＳ３８）。具体的には、仕分け番号読取部５０４は、ステップＳ３３で回転した画像を、さらに１８０°回転させる。この回転処理は、バーコード検知情報に含まれるバーコードの矩形部分の回転角度は、±９０°の範囲である可能性があるため、画像を１８０°反転させて上下を逆にしてもう一度仕分け番号の認識処理を行うために行う。
この後の処理手順は、ステップＳ３４〜ステップＳ３７と同様である。つまり、仕分け番号読取部５０４は、バーコード矩形部分の上方の領域を対象としてＯＣＲで仕分け番号を読取る（ステップＳ３９）。仕分け番号が読取れた場合（ステップＳ３９１；Ｙｅｓ）、仕分け番号読取部５０４は、読み取った仕分け番号を出力情報に設定し、ステップＳ３９５の処理に進む。仕分け番号が読み取れなかった場合（ステップＳ３９１；Ｎｏ）、仕分け番号読取部５０４は、バーコードの矩形部分の右側領域を対象としてＯＣＲで仕分け番号を読み取る（ステップＳ３９２）。仕分け番号が読み取れた場合（ステップＳ３９３；Ｙｅｓ）、仕分け番号読取部５０４は、読み取った仕分け番号を出力情報に設定し、ステップＳ３９５の処理に進む。仕分け番号が読み取れなかった場合（ステップＳ３９３；Ｎｏ）、仕分け番号読取部５０４は、他にバーコード検知情報があるかどうかを判定する（ステップＳ３９４）。他にバーコード検知情報がある場合（ステップＳ３９４；Ｙｅｓ）、ステップＳ３３からの処理を繰り返す。他にバーコード検知情報がない場合（ステップＳ３９４；Ｎｏ）、ステップＳ３９５の処理に進む。
ステップＳ３９５では、仕分け番号読取部５０４は、仕分け番号が得られていれば出力情報に設定した仕分け番号を、読取結果判定部５０３と結果出力部５０７に出力する（ステップＳ３９５）。この場合、図５のステップＳ１５にて、読取結果判定部５０３によってＹｅｓと判定され、結果出力部５０７は、出力情報に設定された仕分け番号を、区分先決定機６００へ出力する。区分先決定機６００は、小包１００の区分を行う。また、仕分け番号読取部５０４は、仕分け番号が得られていなければ、リジェクト信号を読取結果判定部５０３と大口ラベル識別部５０５へ出力する。この場合、図５のステップＳ１５にて、読取結果判定部５０３によってＮｏと判定され、次のステップＳ１６の処理が行われる。
ステップＳ３９５では、仕分け番号読取部５０４は、仕分け番号が得られていれば出力情報に設定した仕分け番号を、読取結果判定部５０３と結果出力部５０７に出力する（ステップＳ３９５）。この場合、図５のステップＳ１５にて、読取結果判定部５０３によってＹｅｓと判定され、結果出力部５０７は、出力情報に設定された仕分け番号を、区分先決定機６００へ出力する。区分先決定機６００は、小包１００の区分を行う。また、仕分け番号読取部５０４は、仕分け番号が得られていなければ、リジェクト信号を読取結果判定部５０３と大口ラベル識別部５０５へ出力する。この場合、図５のステップＳ１５にて、読取結果判定部５０３によってＮｏと判定され、次のステップＳ１６の処理が行われる。
次に図８、図９を用いてステップＳ１６の処理について詳しく説明する。
図８は、本発明の一実施形態による大口ラベル識別処理の一例を示す第１のフローチャートである。
まず、大口ラベル識別部５０５は、画像バッファ部５０１から小包画像を、バーコード読取検知部５０２からバーコード情報を取得する（ステップＳ４１）。次に大口ラベル識別部５０５は、取得したバーコード検知情報によって小包画像を回転する（ステップＳ４２）。例えば、大口ラベル識別部５０５は、バーコード検知情報に追跡バーコードの位置座標および回転角度が含まれていれば、追跡バーコードの位置を中心としてその近傍領域のみの画像を回転する。また、後のステップＳ４４での画像マッチング処理においても、平面探索範囲を追跡バーコードの位置を中心とした近傍領域に限定し、角度探索範囲も回転後の画像に対して水平角度０°の近傍角度の範囲内に限定する。これは、大口ラベルおよび複写式ラベルが必ず追跡バーコードを１つ以上持つためであり、追跡バーコードが読めている場合、追跡バーコードを含む平面範囲内および追跡バーコードの傾き角度範囲内に大口ラベルが存在すると考えられるため、探索範囲を平面的にも角度的にも限定することにより、処理に時間のかかる自由回転マッチング処理時間を短縮するためである。次に大口ラベル識別部５０５は、大口ラベル記憶部５０９に登録済みの複数の大口ラベル画像群から大口ラベル画像を一つずつ参照する（ステップＳ４３）。
次に大口ラベル識別部５０５は、小包画像に対して、登録済みの画像を１つずつ探索してマッチング結果を出力する画像マッチング処理を行う（ステップＳ４４）。この画像マッチング処理は平面方向のみならず回転方向に対しても行う自由回転画像マッチング処理とする。大口ラベル識別部５０５は、マッチング処理を行うと、その登録済みの画像との合致度を算出する。
図８は、本発明の一実施形態による大口ラベル識別処理の一例を示す第１のフローチャートである。
まず、大口ラベル識別部５０５は、画像バッファ部５０１から小包画像を、バーコード読取検知部５０２からバーコード情報を取得する（ステップＳ４１）。次に大口ラベル識別部５０５は、取得したバーコード検知情報によって小包画像を回転する（ステップＳ４２）。例えば、大口ラベル識別部５０５は、バーコード検知情報に追跡バーコードの位置座標および回転角度が含まれていれば、追跡バーコードの位置を中心としてその近傍領域のみの画像を回転する。また、後のステップＳ４４での画像マッチング処理においても、平面探索範囲を追跡バーコードの位置を中心とした近傍領域に限定し、角度探索範囲も回転後の画像に対して水平角度０°の近傍角度の範囲内に限定する。これは、大口ラベルおよび複写式ラベルが必ず追跡バーコードを１つ以上持つためであり、追跡バーコードが読めている場合、追跡バーコードを含む平面範囲内および追跡バーコードの傾き角度範囲内に大口ラベルが存在すると考えられるため、探索範囲を平面的にも角度的にも限定することにより、処理に時間のかかる自由回転マッチング処理時間を短縮するためである。次に大口ラベル識別部５０５は、大口ラベル記憶部５０９に登録済みの複数の大口ラベル画像群から大口ラベル画像を一つずつ参照する（ステップＳ４３）。
次に大口ラベル識別部５０５は、小包画像に対して、登録済みの画像を１つずつ探索してマッチング結果を出力する画像マッチング処理を行う（ステップＳ４４）。この画像マッチング処理は平面方向のみならず回転方向に対しても行う自由回転画像マッチング処理とする。大口ラベル識別部５０５は、マッチング処理を行うと、その登録済みの画像との合致度を算出する。
次に大口ラベル識別部５０５は、未だマッチング処理を行っていない他の登録大口ラベルが存在するかどうかを判定する（ステップＳ４５）、他の大口ラベル画像が存在する場合（ステップＳ４５；Ｙｅｓ）、登録されている全ての大口ラベルとのマッチング処理を繰り返し、マッチング処理の度に合致度の算出を行う。
全ての大口ラベル画像とのマッチングが終了すると（ステップＳ４５；Ｎｏ）、次に大口ラベル識別部５０５は、最も大きい合致度を選択する（ステップＳ４６）。次に大口ラベル識別部５０５は、選択した最も大きな合致度が所定の閾値以上かどうかを判定する（ステップＳ４７）。所定の閾値とは、画像が十分にマッチしたと判断できる最低限の値である。最も大きな合致度が所定の閾値未満の場合（ステップＳ４７；Ｎｏ）、大口ラベル識別部５０５は、不一致を出力情報に設定し、ステップＳ４９１の処理に進む。
全ての大口ラベル画像とのマッチングが終了すると（ステップＳ４５；Ｎｏ）、次に大口ラベル識別部５０５は、最も大きい合致度を選択する（ステップＳ４６）。次に大口ラベル識別部５０５は、選択した最も大きな合致度が所定の閾値以上かどうかを判定する（ステップＳ４７）。所定の閾値とは、画像が十分にマッチしたと判断できる最低限の値である。最も大きな合致度が所定の閾値未満の場合（ステップＳ４７；Ｎｏ）、大口ラベル識別部５０５は、不一致を出力情報に設定し、ステップＳ４９１の処理に進む。
一方、最も大きな合致度が所定の閾値以上の場合（ステップＳ４７；Ｙｅｓ）、大口ラベル識別部５０５は、もっとも合致度の大きい登録大口ラベル画像を参照して、登録大口ラベル画像における仕分け番号の表示領域および宛名住所の表示領域の座標情報を取得する（ステップＳ４８）。次に大口ラベル識別部５０５は、ステップＳ４８で取得した仕分け番号領域および宛名住所領域の座標情報を用いて、画像バッファ部５０１から取得した小包画像における大口ラベル内の仕分け番号領域および宛名住所領域を対象とするＯＣＲ読み取りを行う（ステップＳ４９）。ＯＣＲ読み取りに成功すると仕分け番号が取得できる。次に大口ラベル識別部５０５は、仕分け番号を取得した場合は、仕分け番号を出力情報に設定し、仕分け番号が読取れなかった場合は、リジェクト信号を出力情報に設定する。なお、大口ラベル識別部５０５は、読み取った住所と仕分け番号を照合して、仕分け番号が正しいことのチェックを行ってもよい。
次に大口ラベル識別部５０５は、仕分け番号が得られていれば出力情報に設定した仕分け番号を、読取結果判定部５０３と結果出力部５０７に出力する（ステップＳ４９１）。この場合、図５のステップＳ１７にて、読取結果判定部５０３によってＹｅｓと判定され、結果出力部５０７は、出力情報に設定された仕分け番号を、区分先決定機６００へ出力する。区分先決定機６００は、小包１００の区分を行う。また、大口ラベル識別部５０５は、仕分け番号が得られていなければ、リジェクト信号を読取結果判定部５０３と追跡バーコード利用部５０６へ出力する。この場合、図５のステップＳ１７にて、読取結果判定部５０３によってＮｏと判定され、次のステップＳ１８の処理が行われる。
次に図９を用いて図８のステップＳ１６の処理について詳しく説明する。
図９は、本発明の一実施形態による大口ラベル識別処理の一例を示す第２のフローチャートである。
図９は、大口ラベル画像の登録や、ステップＳ４８で取得する大口ラベルの登録情報を作成する処理フローである。大口ラベルの登録は小包１００の区分に対して事前に行っておく処理である。
まず、大口ラベル登録部５０８は、登録すべき大口ラベルが貼付された小包の画像を入力する（ステップＳ５１）。次に大口ラベル登録部５０８は、大口ラベル登録操作を行う登録者に対して小包画像を表示する（ステップＳ５２）。次に大口ラベル登録部５０８は、大口ラベルに一意性を持たせるために、登録者が指定するＩＤ番号を、大口ラベルに割り当てる大口ラベルＩＤ割当処理を行う（ステップＳ５３）。次に大口ラベル登録部５０８は、登録者が指定する大口ラベルの外形領域を登録する（ステップＳ５４）。このとき、登録者は画像を目視して大口ラベルの全体矩形を指定する。次に大口ラベル登録部５０８は、登録者が指定する大口ラベルの中の仕分け番号領域と宛名住所領域を登録する（ステップＳ５５）。このとき、登録者は画像を目視して大口ラベル内の仕分け番号記載領域および宛名住所記載領域を指定する。
次に登録者は、大口ラベルが上下あるいは左右に２連の同じラベルが並ぶ様態であるかを目視で判断する（ステップＳ５６）。同じラベルが並ぶ様態であれば（ステップＳ５６；Ｙｅｓ）、登録者は大口ラベル内の２連のラベルの１枚分の矩形ラベル領域を指定し、大口ラベルとして切出すラベル半分領域指定処理を行う（ステップＳ５７）。同じラベルが並ぶ様態でなければ（ステップＳ５６；Ｎｏ）、ステップＳ５９の処理へ進む。
次に登録者はステップＳ５７で切り出した領域内の仕分け番号記載領域座標および宛名住所記載領域座標を指定する（ステップＳ５８）。最後に大口ラベル登録部５０８は、大口ラベル画像とそのＩＤ番号および上記の処理で確定した仕分け番号記載領域および宛名住所記載領域の座標、２連のラベルの１枚分の矩形ラベル領域などを対応付けて大口ラベル記憶部５０９へ登録する（ステップＳ５９）。これらの処理により、大口ラベル記憶部５０９には、登録大口ラベルが登録される。
図９は、本発明の一実施形態による大口ラベル識別処理の一例を示す第２のフローチャートである。
図９は、大口ラベル画像の登録や、ステップＳ４８で取得する大口ラベルの登録情報を作成する処理フローである。大口ラベルの登録は小包１００の区分に対して事前に行っておく処理である。
まず、大口ラベル登録部５０８は、登録すべき大口ラベルが貼付された小包の画像を入力する（ステップＳ５１）。次に大口ラベル登録部５０８は、大口ラベル登録操作を行う登録者に対して小包画像を表示する（ステップＳ５２）。次に大口ラベル登録部５０８は、大口ラベルに一意性を持たせるために、登録者が指定するＩＤ番号を、大口ラベルに割り当てる大口ラベルＩＤ割当処理を行う（ステップＳ５３）。次に大口ラベル登録部５０８は、登録者が指定する大口ラベルの外形領域を登録する（ステップＳ５４）。このとき、登録者は画像を目視して大口ラベルの全体矩形を指定する。次に大口ラベル登録部５０８は、登録者が指定する大口ラベルの中の仕分け番号領域と宛名住所領域を登録する（ステップＳ５５）。このとき、登録者は画像を目視して大口ラベル内の仕分け番号記載領域および宛名住所記載領域を指定する。
次に登録者は、大口ラベルが上下あるいは左右に２連の同じラベルが並ぶ様態であるかを目視で判断する（ステップＳ５６）。同じラベルが並ぶ様態であれば（ステップＳ５６；Ｙｅｓ）、登録者は大口ラベル内の２連のラベルの１枚分の矩形ラベル領域を指定し、大口ラベルとして切出すラベル半分領域指定処理を行う（ステップＳ５７）。同じラベルが並ぶ様態でなければ（ステップＳ５６；Ｎｏ）、ステップＳ５９の処理へ進む。
次に登録者はステップＳ５７で切り出した領域内の仕分け番号記載領域座標および宛名住所記載領域座標を指定する（ステップＳ５８）。最後に大口ラベル登録部５０８は、大口ラベル画像とそのＩＤ番号および上記の処理で確定した仕分け番号記載領域および宛名住所記載領域の座標、２連のラベルの１枚分の矩形ラベル領域などを対応付けて大口ラベル記憶部５０９へ登録する（ステップＳ５９）。これらの処理により、大口ラベル記憶部５０９には、登録大口ラベルが登録される。
次に図１０を用いてステップＳ１８の処理について詳しく説明する。
図１０は、本発明の一実施形態による追跡バーコード利用処理の一例を示すフローチャートである。
まず、追跡バーコード利用部５０６は、画像バッファ部５０１から小包画像を、バーコード読取検知部５０２からバーコード情報を取得する（ステップＳ６１）。次に追跡バーコード利用部５０６は、小包画像の中から追跡バーコードが２個だけ読めるのか、そしてその２個の追跡バーコードの画像上の回転角度がほぼ同じ方向であるかを判断する（ステップＳ６２）。ほぼ同じ方向の２個の追跡バーコードが読めている場合（ステップＳ６２；Ｙｅｓ）、追跡バーコード利用部５０６は、２個の追跡バーコード矩形座標値のほぼ中間点を中心に、その近傍画像を、２個の追跡バーコードの回転角度の分だけ回転する（ステップＳ６３）。次に追跡バーコード利用部５０６は、２個の追跡バーコードが左右に並んでいるかどうかを判定する（ステップＳ６４）。２個の追跡バーコードが左右に並んでいる場合（ステップＳ６４；Ｙｅｓ）、追跡バーコード利用部５０６は、左右に並んだ追跡バーコードの左側のバーコードの矩形座標の上部に大雑把に矩形領域を定め、その領域内に対して宛名住所のＯＣＲ読取を行う（ステップＳ６５）。追跡バーコード利用部５０６は、読取結果を出力情報として設定し、ステップＳ６９２へ進む。
図１０は、本発明の一実施形態による追跡バーコード利用処理の一例を示すフローチャートである。
まず、追跡バーコード利用部５０６は、画像バッファ部５０１から小包画像を、バーコード読取検知部５０２からバーコード情報を取得する（ステップＳ６１）。次に追跡バーコード利用部５０６は、小包画像の中から追跡バーコードが２個だけ読めるのか、そしてその２個の追跡バーコードの画像上の回転角度がほぼ同じ方向であるかを判断する（ステップＳ６２）。ほぼ同じ方向の２個の追跡バーコードが読めている場合（ステップＳ６２；Ｙｅｓ）、追跡バーコード利用部５０６は、２個の追跡バーコード矩形座標値のほぼ中間点を中心に、その近傍画像を、２個の追跡バーコードの回転角度の分だけ回転する（ステップＳ６３）。次に追跡バーコード利用部５０６は、２個の追跡バーコードが左右に並んでいるかどうかを判定する（ステップＳ６４）。２個の追跡バーコードが左右に並んでいる場合（ステップＳ６４；Ｙｅｓ）、追跡バーコード利用部５０６は、左右に並んだ追跡バーコードの左側のバーコードの矩形座標の上部に大雑把に矩形領域を定め、その領域内に対して宛名住所のＯＣＲ読取を行う（ステップＳ６５）。追跡バーコード利用部５０６は、読取結果を出力情報として設定し、ステップＳ６９２へ進む。
２個の追跡バーコードが左右に並んでいない場合（ステップＳ６４；Ｎｏ）、追跡バーコード利用部５０６は、前述の２個の追跡バーコードが上下に並んでいるかどうかを判定する（ステップＳ６６）。２個の追跡バーコードが上下に並んでいる場合（ステップＳ６６；Ｙｅｓ）、追跡バーコード利用部５０６は、上下に並んだ追跡バーコードの上側の追跡バーコードの矩形座標の上部に大雑把に矩形領域を定め、その領域内に対して宛名住所のＯＣＲ読取を行う（ステップＳ６７）。追跡バーコード利用部５０６は、読取結果を出力情報として設定し、ステップＳ６９２へ進む。２個の追跡バーコードが上下に並んでいる場合（ステップＳ６６；Ｎｏ）、追跡バーコード利用部５０６は、出力情報にリジェクト信号を設定し、ステップＳ６９２へ進む。
また、２個の追跡バーコードが読めない場合（ステップＳ６２；Ｎｏ）、追跡バーコード利用部５０６は、小包画像の中から追跡バーコードが１個だけ読めるのかどうかを判定する（ステップＳ６８）。追跡バーコードが１個も読めない場合（ステップＳ６８；Ｎｏ）、追跡バーコード利用部５０６は、出力情報にリジェクト信号を設定し、ステップＳ６９２へ進む。追跡バーコードが１個だけ読める場合（ステップＳ６８；Ｙｅｓ）、追跡バーコード利用部５０６は、１個の追跡バーコードの矩形部分を中心に、その近傍画像を、回転角度分だけ回転させる（ステップＳ６９）。次に、追跡バーコード利用部５０６は、追跡バーコードが複写式伝票の追跡バーコードであると仮定し、複写式伝票の追跡バーコード位置と宛名住所記載位置の相対的な所定の位置関係から宛名記載領域および住所記載領域を定め、その領域内に対して宛名住所のＯＣＲ読取を行う（ステップＳ６９１）。追跡バーコード利用部５０６は、読取結果を出力情報として設定し、ステップＳ６９２へ進む。追跡バーコード利用部５０６は、仕分け番号が得られていれば出力情報に設定した仕分け番号を、得られていればリジェクト信号を、結果出力部５０７に出力する（ステップＳ６９２）。結果出力部５０７は、出力情報に設定された仕分け番号を、区分先決定機６００へ出力する。区分先決定機６００は、小包１００の区分を行う。
搬送される小包を上からカメラで撮像した小包画像の一例を図１１、図１２に示す。図１１（ａ）、図１１（ｂ）、図１２（ａ）、図１２（ｂ）に示すように様々な様態のラベルを持つ小包が存在する。本実施形態によれば、このような様々な様態のラベルを持つ小包から精度良く仕分け番号を認識することができる。
上記したように、小包用仕分け先認識装置５００は、小包に付定されたバーコード位置の近傍あるいは、所定の相対位置に仕分け番号の表示領域や宛名や住所の表示領域があることを利用して、ＯＣＲ読取対象領域の推定を、確からしい順序でウォーターフォール式に行うことにより誤読の可能性を低減しつつ、短時間で効率よく仕分け番号の認識処理を行うことができる。
上記したように、小包用仕分け先認識装置５００は、小包に付定されたバーコード位置の近傍あるいは、所定の相対位置に仕分け番号の表示領域や宛名や住所の表示領域があることを利用して、ＯＣＲ読取対象領域の推定を、確からしい順序でウォーターフォール式に行うことにより誤読の可能性を低減しつつ、短時間で効率よく仕分け番号の認識処理を行うことができる。
図１３は、本発明の一実施形態による宛先認識装置の最小構成を示すブロック図である。
宛先認識装置１０は、少なくとも、バーコード読取検知部１２を備えている。
バーコード読取検知部１２は、小包の宛先情報が含まれる小包画像に表示されたコード情報を読み取って、当該コード情報が示す仕分け番号を読み取る。バーコード読取検知部１２は、仕分け番号の読み取りができない場合、小包画像における仕分け番号の表示位置の基準となる情報を検出する。
宛先認識装置１０は、少なくとも、バーコード読取検知部１２を備えている。
バーコード読取検知部１２は、小包の宛先情報が含まれる小包画像に表示されたコード情報を読み取って、当該コード情報が示す仕分け番号を読み取る。バーコード読取検知部１２は、仕分け番号の読み取りができない場合、小包画像における仕分け番号の表示位置の基準となる情報を検出する。
上述の宛先認識装置１０、小包用仕分け先認識装置５００は内部にコンピュータを有している。上述した宛先認識装置１０、小包用仕分け先認識装置５００の各処理の過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータが読み出して実行することによって、上記処理が行われる。ここでコンピュータ読み取り可能な記録媒体とは、磁気ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、半導体メモリ等をいう。また、このコンピュータプログラムを通信回線によってコンピュータに送信し、この送信を受けたコンピュータが当該プログラムを実行するようにしてもよい。また、上記プログラムは、前述した機能の一部を実現するためのものであってもよい。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。また、上述した宛先認識装置１０、小包用仕分け先認識装置５００の各機能の全て又は一部は、ＡＳＩＣ（Application Specific Integrated Circuit）やＰＬＤ（Programmable Logic Device）やＦＰＧＡ（Field-Programmable Gate Array）やＰＬＣ（Programmable Logic Controller）等のハードウェアを用いて実現されてもよい。
その他、本発明の趣旨を逸脱しない範囲で、上記した実施の形態における構成要素を周知の構成要素に置き換えることは適宜可能である。また、この発明の技術範囲は上記の実施形態に限られるものではなく、本発明の趣旨を逸脱しない範囲において種々の変更を加えることが可能である。バーコード読取検知部１２、バーコード読取検知部５０２はコード読取部の一例である。大口ラベル識別部１４、大口ラベル識別部５０５はラベル識別部の一例である。追跡バーコード利用部１５、追跡バーコード利用部５０６は追跡用コード利用部の一例である。追跡バーコード１Ｃ、１Ｄは追跡用コード情報の一例である。
１・・・小包自動区分システム
１０・・・宛先認識装置
１１・・・画像入力部
１２・・・バーコード読取検知部
１３・・・仕分け番号読取部
１４・・・大口ラベル識別部
１５・・・追跡バーコード利用部
２００・・・搬送制御装置
３００・・・画像入力カメラ
４００・・・画像入力装置
５００・・・小包用仕分け先認識装置
５０１・・・画像バッファ部
５０２・・・バーコード読取検知部
５０３・・・読取結果判定部
５０４・・・仕分け番号読取部
５０５・・・大口ラベル識別部
５０６・・・追跡バーコード利用部
５０７・・・結果出力部
５０８・・・大口ラベル登録部
５０９・・・大口ラベル記憶部
６００・・・区分先決定機
１０・・・宛先認識装置
１１・・・画像入力部
１２・・・バーコード読取検知部
１３・・・仕分け番号読取部
１４・・・大口ラベル識別部
１５・・・追跡バーコード利用部
２００・・・搬送制御装置
３００・・・画像入力カメラ
４００・・・画像入力装置
５００・・・小包用仕分け先認識装置
５０１・・・画像バッファ部
５０２・・・バーコード読取検知部
５０３・・・読取結果判定部
５０４・・・仕分け番号読取部
５０５・・・大口ラベル識別部
５０６・・・追跡バーコード利用部
５０７・・・結果出力部
５０８・・・大口ラベル登録部
５０９・・・大口ラベル記憶部
６００・・・区分先決定機
Claims (8)
- 小包の宛先情報が含まれる画像に表示されたコード情報を読み取って、当該コード情報が示す仕分け番号を読み取り、前記仕分け番号の読み取りができない場合、前記画像における前記仕分け番号の表示位置の基準となる情報を検出するコード読取部と、
前記仕分け番号の表示位置の基準となる情報として検出された前記コード情報が表示された座標および前記コード情報の表示の傾きの情報と、前記画像と、を取得し、前記画像を前記傾きの分だけ回転し、前記コード情報の表示領域と前記仕分け番号の表示領域との所定の位置関係と前記コード情報の座標とに基づいて、前記仕分け番号の表示領域を推定し、当該推定した表示領域を対象として仕分け番号の読み取り処理を行う仕分け番号読取部と、
宛先情報を含む複数の参照用のラベル画像と、前記小包の宛先情報が含まれる画像との画像マッチングを行い、所定の閾値以上、且つ、最も高い合致度を有する前記参照用のラベル画像における前記仕分け番号の表示領域の座標情報に基づいて、前記小包の宛先情報が含まれる画像における前記仕分け番号の表示領域を対象として仕分け番号の読み取り処理を行うラベル識別部と、
を備える宛先認識装置。 - 前記仕分け番号読取部は、前記コード情報の表示領域の上側の領域、または、前記コード情報の表示領域の右側の領域、を対象として仕分け番号の読み取り処理を行う、
請求項１に記載の宛先認識装置。 - 前記コード読取部が前記小包の宛先情報が含まれる画像から前記小包の追跡用コード情報を読み取った場合、当該追跡用コード情報の表示位置に基づいて、前記小包の宛先情報の表示位置を特定し、当該表示位置から宛先情報を読み取る追跡用コード利用部、
をさらに備える請求項１または請求項２に記載の宛先認識装置。 - 前記追跡用コード利用部は、読み取った前記追跡用コード情報の数に応じて、特定すべき前記小包の宛先情報の表示位置を変更する、
請求項３に記載の宛先認識装置。 - 最初に前記コード読取部による前記仕分け番号の読み取り処理を行い、
次に前記仕分け番号読取部による前記仕分け番号の読み取り処理を行い、
次に前記ラベル識別部による前記仕分け番号の読み取り処理を行い、
最後に前記追跡用コード利用部による前記宛先情報を読み取の読み取り処理を行う、
請求項４に記載の宛先認識装置。 - 請求項１から請求項５のいずれか１項に記載の宛先認識装置と、
前記小包の宛先情報が含まれる画像を撮像して、撮像した画像を前記宛先認識装置に出力するカメラと、
前記宛先認識装置で読み取った仕分け番号に基づき、区分先を決定する、区分先決定機と
を備える、小包自動区分システム。 - 小包の宛先情報が含まれる画像に表示されたコード情報を読み取って、当該コード情報が示す仕分け番号を読み取るステップと、
前記仕分け番号の読み取りができない場合、前記画像における前記仕分け番号の表示位置の基準となる情報を検出するステップと、
前記仕分け番号の表示位置の基準となる情報として検出された前記コード情報が表示された座標および前記コード情報の表示の傾きの情報と、前記画像と、を取得し、前記画像を前記傾きの分だけ回転し、前記コード情報の表示領域と前記仕分け番号の表示領域との所定の位置関係と前記コード情報の座標とに基づいて、前記仕分け番号の表示領域を推定し、当該推定した表示領域を対象として仕分け番号の読み取り処理を行うステップと、
宛先情報を含む複数の参照用のラベル画像と、前記小包の宛先情報が含まれる画像との画像マッチングを行い、所定の閾値以上、且つ、最も高い合致度を有する前記参照用のラベル画像における前記仕分け番号の表示領域の座標情報に基づいて、前記小包の宛先情報が含まれる画像における前記仕分け番号の表示領域を対象として仕分け番号の読み取り処理を行うステップと、
を有する宛先認識方法。 - 宛先認識装置のコンピュータを、
小包の宛先情報が含まれる画像に表示されたコード情報を読み取って、当該コード情報が示す仕分け番号を読み取る手段、
前記仕分け番号の読み取りができない場合、前記画像における前記仕分け番号の表示位置の基準となる情報を検出する手段、
前記仕分け番号の表示位置の基準となる情報として検出された前記コード情報が表示された座標および前記コード情報の表示の傾きの情報と、前記画像と、を取得し、前記画像を前記傾きの分だけ回転し、前記コード情報の表示領域と前記仕分け番号の表示領域との所定の位置関係と前記コード情報の座標とに基づいて、前記仕分け番号の表示領域を推定し、当該推定した表示領域を対象として仕分け番号の読み取り処理を行う手段、
宛先情報を含む複数の参照用のラベル画像と、前記小包の宛先情報が含まれる画像との画像マッチングを行い、所定の閾値以上、且つ、最も高い合致度を有する前記参照用のラベル画像における前記仕分け番号の表示領域の座標情報に基づいて、前記小包の宛先情報が含まれる画像における前記仕分け番号の表示領域を対象として仕分け番号の読み取り処理を行う手段、
として機能させるためのプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017071555A JP6852518B2 (ja) | 2017-03-31 | 2017-03-31 | 宛先認識装置、小包自動区分システム、宛先認識方法及びプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017071555A JP6852518B2 (ja) | 2017-03-31 | 2017-03-31 | 宛先認識装置、小包自動区分システム、宛先認識方法及びプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018171579A JP2018171579A (ja) | 2018-11-08 |
| JP6852518B2 true JP6852518B2 (ja) | 2021-03-31 |
Family
ID=64108078
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017071555A Active JP6852518B2 (ja) | 2017-03-31 | 2017-03-31 | 宛先認識装置、小包自動区分システム、宛先認識方法及びプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6852518B2 (ja) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111822365B (zh) * | 2019-04-16 | 2022-10-11 | 顺丰科技有限公司 | 快递分拣装置以及快递分拣方法 |
| CN112520286B (zh) * | 2019-09-19 | 2023-08-04 | 北京京东乾石科技有限公司 | 补码装置、补码方法及分拣系统、存储介质和电子设备 |
| JP7481926B2 (ja) * | 2020-06-29 | 2024-05-13 | 株式会社東芝 | 情報処理装置、仕分システム、及びプログラム |
| JP2023087923A (ja) * | 2021-12-14 | 2023-06-26 | 株式会社東芝 | 仕分け装置、仕分け方法および仕分けプログラム |
| CN114950977B (zh) * | 2022-04-08 | 2023-11-24 | 浙江华睿科技股份有限公司 | 一种包裹追溯方法、装置、系统和计算机可读存储介质 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH10174934A (ja) * | 1996-12-18 | 1998-06-30 | Toshiba Corp | 未符号化情報のあるカスタマーバーコードを認識する郵便物処理装置 |
| JP3240280B2 (ja) * | 1997-03-03 | 2001-12-17 | 日本電信電話株式会社 | 帳票読み取り方法および帳票読み取りプログラムを格納したコンピュータ読み取り可能な記録媒体 |
| JP5971694B2 (ja) * | 2012-04-12 | 2016-08-17 | 株式会社東芝 | 荷物仕分システム |
| JP2014144398A (ja) * | 2013-01-28 | 2014-08-14 | Japan Post Co Ltd | 配送物区分システム及び配送物区分方法 |
-
2017
- 2017-03-31 JP JP2017071555A patent/JP6852518B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2018171579A (ja) | 2018-11-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6852518B2 (ja) | 宛先認識装置、小包自動区分システム、宛先認識方法及びプログラム | |
| JP3495739B2 (ja) | 小包情報読み取りシステムおよび方法 | |
| US6360001B1 (en) | Automatic location of address information on parcels sent by mass mailers | |
| US5880451A (en) | System and method for OCR assisted bar code decoding | |
| JP3124296B2 (ja) | 基準マークの位置および方向の検出方法 | |
| US12080092B2 (en) | Persistent feature based image rotation and candidate region of interest | |
| KR101081086B1 (ko) | 바코드 처리 장치 및 바코드 처리 방법 | |
| JPWO2015064107A1 (ja) | 管理システム、リスト作成装置、データ構造および印刷ラベル | |
| KR102371446B1 (ko) | 우편물에 인쇄된 배송지 주소를 인식하는 방법 및 장치 | |
| CN109741551A (zh) | 一种商品识别结算方法、装置及系统 | |
| US20140268250A1 (en) | Systems and methods for receipt-based mobile image capture | |
| JP2010221094A (ja) | 郵便物誤区分データ収集システム、郵便物誤区分データ収集方法及びその制御プログラム | |
| KR20040057175A (ko) | 바코드 고속 관심 영역 위치 판독 시스템 및 제어 방법 | |
| US20040024716A1 (en) | Mail sorting processes and systems | |
| US20120243728A1 (en) | Bulk Region of Interest Learning | |
| JP3648050B2 (ja) | 帳票画像分類方法、帳票画像登録方法および帳票画像分類装置 | |
| US20210044424A1 (en) | Structurally matching images by hashing gradient singularity descriptors | |
| WO2023171132A1 (ja) | 情報処理システム | |
| AU2001235944B2 (en) | Automatic location of address information on parcels sent by mass mailers | |
| JP3926944B2 (ja) | 郵便物読取装置、および郵便物読取方法 | |
| JP2013103163A (ja) | ビデオコーディングシステム、帳票傾き補正プログラムおよび小包処理装置 | |
| JPH08155397A (ja) | 郵便物区分装置およびバーコード印刷装置 | |
| JPH11207265A (ja) | 情報処理装置および郵便物処理装置 | |
| AU2001235944A1 (en) | Automatic location of address information on parcels sent by mass mailers | |
| JP2001259532A (ja) | 読取装置と紙葉類処理装置と読取方法と紙葉類処理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200207 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201113 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201124 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210122 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210209 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210222 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6852518 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |