JP6453488B2 - 人体頭頂部の識別に基づく通行人の統計方法及び装置 - Google Patents
人体頭頂部の識別に基づく通行人の統計方法及び装置 Download PDFInfo
- Publication number
- JP6453488B2 JP6453488B2 JP2017555473A JP2017555473A JP6453488B2 JP 6453488 B2 JP6453488 B2 JP 6453488B2 JP 2017555473 A JP2017555473 A JP 2017555473A JP 2017555473 A JP2017555473 A JP 2017555473A JP 6453488 B2 JP6453488 B2 JP 6453488B2
- Authority
- JP
- Japan
- Prior art keywords
- region
- human head
- arc
- passer
- depth image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000007619 statistical method Methods 0.000 title claims description 11
- 241000287107 Passer Species 0.000 claims description 37
- 230000007613 environmental effect Effects 0.000 claims description 29
- 238000000034 method Methods 0.000 claims description 26
- 230000001936 parietal effect Effects 0.000 claims description 8
- 238000004422 calculation algorithm Methods 0.000 claims description 7
- 238000004891 communication Methods 0.000 claims description 3
- 238000001514 detection method Methods 0.000 description 25
- 238000010586 diagram Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 239000002023 wood Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Image Analysis (AREA)
- Traffic Control Systems (AREA)
- Image Processing (AREA)
Description
本発明は、画像識別の技術分野に属し、特に、人体頭頂部の識別に基づく通行人の統計方法及び装置に関する。
急速な経済発展に伴って、都市の役割が日に日に増強され、都市の人口も増加していく。そして、都市の人口の安全を有効に保障するために、マーケット、鉄道駅や交通交差点等の人流量の大きい場所に対して、緊急事態の発生に対応できるようにかかる領域に有効な安全対策を設定すると共に、これら場所の人口流量の制限に基準を提供するために、人数統計を行っている。
人数統計の基礎としては、人全体に対する識別又は人体のある部位に対する識別があり、遮りによる検出漏れや誤検出を回避するために、カメラは一般に垂直撮影を採用し、最適な人体の識別部位は頭部領域であり、通常方法では人の頭部領域を識別する方式を用いて人数を統計している。従来の人体頭部の識別技術は、主にRGBカメラを用いて実現され、具体的に、人体頭部の形状、木目や色の特徴を抽出し、そして、人体頭部の識別が実現されるように関連画像においてマッチングを行っている。例えば、人体頭部のサンプルを大量に収集することによって、機械で学習するか、或いは神経回路網の方法で頭部サンプルについて訓練を行い、訓練の分類器を用いて頭部の検出を実現している。近年のデプスカメラの普及に伴って、RGBカメラの代わりにデプスカメラを用いて人の頭部を識別することがだんだん研究の焦点となっており、デプス画像の持つ相対距離情報は、RGBカメラの持つ色と木目情報等よりも人体頭部の識別に有利であった。しかしながら、通行人同士の遮りや光線等の他の干渉要因の存在により、頭部検出の正確率が高くなくて、通行人の誤検出や検出漏れとの問題が依然としてよく発生した。
本発明は、従来技術に有効な人体頭部の識別方法が提供できなくて、人体頭部の検出の正確率が低下し、通行人の誤検出や検出漏れがよく発生するという問題を解決する人体頭頂部の識別に基づく通行人の統計方法及び装置を提供することを目的とする。
一方、本発明は、人体頭頂部の識別に基づく通行人の統計方法を提供しており、当該方法は、次のようなステップを含んでいる。即ち、
デプスカメラにより撮影された通行人のデプス画像を読み出し、前記通行人のデプス画像と予め取得された環境平均値画像とを比較して、前記通行人のデプス画像の前景画像を取得するステップと、
前記前景画像を複数の領域に分割し、前記複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出すると共に、前記それぞれの領域に形成される領域の曲面が人体頭頂部の曲面と一致するか否かを検出するステップと、
現在の被検出領域のエッジ画素点にステップが存在し、且つ、前記現在の被検出領域に形成される領域の曲面が前記人体頭頂部の曲面と一致すると、前記現在の被検出領域が人体頭頂部領域であると確定するステップと、
前記通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力するステップとを含んでいる。
デプスカメラにより撮影された通行人のデプス画像を読み出し、前記通行人のデプス画像と予め取得された環境平均値画像とを比較して、前記通行人のデプス画像の前景画像を取得するステップと、
前記前景画像を複数の領域に分割し、前記複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出すると共に、前記それぞれの領域に形成される領域の曲面が人体頭頂部の曲面と一致するか否かを検出するステップと、
現在の被検出領域のエッジ画素点にステップが存在し、且つ、前記現在の被検出領域に形成される領域の曲面が前記人体頭頂部の曲面と一致すると、前記現在の被検出領域が人体頭頂部領域であると確定するステップと、
前記通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力するステップとを含んでいる。
他方に、本発明は、人体頭頂部の識別に基づく通行人の統計装置も提供しており、当該装置は、デプスカメラにより撮影された通行人のデプス画像を読み出し、前記通行人のデプス画像と予め取得された環境平均値画像とを比較して、前記通行人のデプス画像の前景画像を取得するための前景取得手段と、
前記前景画像を複数の領域に分割し、前記複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出すると共に、前記それぞれの領域に形成される領域の曲面が人体頭頂部の曲面と一致するか否かを検出するための領域検出手段と、
現在の被検出領域のエッジ画素点にステップが存在し、且つ、前記現在の被検出領域に形成される領域の曲面が前記人体頭頂部の曲面と一致すると、前記現在の被検出領域が人体頭頂部領域であると確定するための頭頂部確定手段と、
前記通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力するための通行人数量出力手段とを備えている。
前記前景画像を複数の領域に分割し、前記複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出すると共に、前記それぞれの領域に形成される領域の曲面が人体頭頂部の曲面と一致するか否かを検出するための領域検出手段と、
現在の被検出領域のエッジ画素点にステップが存在し、且つ、前記現在の被検出領域に形成される領域の曲面が前記人体頭頂部の曲面と一致すると、前記現在の被検出領域が人体頭頂部領域であると確定するための頭頂部確定手段と、
前記通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力するための通行人数量出力手段とを備えている。
本発明は、デプスカメラにより撮影された通行人のデプス画像を読み出した後、通行人のデプス画像と予め取得された環境平均値画像とを比較して、通行人のデプス画像の前景画像を取得し、さらに前景画像を複数の領域に分割し、当該複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出すると共に、それぞれの領域に形成される領域の曲面が人体頭頂部の曲面と一致するか否かを検出し、現在の被検出領域のエッジ画素点にステップが存在し、且つ、現在の被検出領域に形成される領域の曲面が人体頭頂部の曲面と一致すると、現在の被検出領域が人体頭頂部領域であると確定し、さらに、通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力することによって、頭部特徴を正確に抽出して人体頭頂部の識別正確率を向上させ、さらに通行人の精確的な統計を実現している。
以下、本発明の目的、技術案及び利点をもっと明瞭化するために、図面及び実施例を組合わせて、本発明についてさらに詳しく説明する。ここで記述した具体的な実施例は本発明を解釈するためのものに過ぎず、本発明を限定するためのものではないことを理解できるであろう。
以下に、具体的な実施例を参照しながら本発明の具体的な実現について詳しく説明する。
実施例1:
図1は、本発明の実施例1の提供する人体頭頂部の識別に基づく通行人の統計方法の実現流れを示しており、説明の便宜上、本発明の実施例と関連する部分しか示していない。詳細は次の通りである。
図1は、本発明の実施例1の提供する人体頭頂部の識別に基づく通行人の統計方法の実現流れを示しており、説明の便宜上、本発明の実施例と関連する部分しか示していない。詳細は次の通りである。
ステップS101では、デプスカメラにより撮影された通行人のデプス画像を読み出し、通行人のデプス画像と予め取得された環境平均値画像とを比較して、通行人のデプス画像の前景画像を取得する。
本発明の実施例は、通行人又は人流統計のコンピュータ設備又はシステムに適用され、通行人数量の統計を実現している。本発明の実施例において、まず、デプスカメラにより通行人を撮影して、通行人のデプス画像を取得し、続いて、通行人のデプス画像と予め取得された環境平均値画像とを比較して、通行人のデプス画像の前景画像を取得する。
好ましくは、次の公式
ステップS102では、前景画像を複数の領域に分割し、複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出すると共に、それぞれの領域に形成される領域の曲面が人体頭頂部の曲面と一致するか否かを検出する。
本発明の実施例において、前景画像を複数の領域に分割する時、プリセットされたシードポイント成長アルゴリズムを用いて前景画像から複数の連通領域を探して、前景画像を対応する複数の領域に分割することができる。例えば、領域成長法或いはシードポイント成長アルゴリズムに類似なフラッディング法及び走査線法を用いることができる。好ましくは、領域成長アルゴリズムを用いて前景画像から複数の領域を分割して、領域の分割速度を向上させる。
ステップS103では、現在の被検出領域のエッジ画素点にステップが存在し、且つ、現在の被検出領域に形成される領域の曲面が人体頭頂部の曲面と一致すると、現在の被検出領域が人体頭頂部領域であると確定する。
人体の頭部を精確に識別するために、本発明の実施例では、人体頭頂部のデプス画像における画像領域と他の部分の画像領域のステップ及び人体頭頂部の特定形状を同時に検出し、現在の被検出領域のエッジ画素点にステップが存在し、且つ、現在の被検出領域に形成される領域の曲面が人体頭頂部の曲面と一致してこそ、現在の被検出領域が人体頭頂部領域であると確定でき、有効に通行人識別の精確度を向上できる。
ステップS104では、通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力する。
本発明の実施例において、通行人の数量を統計して出力する時、好ましくは、通行人のデプス画像と隣の通行人のデプス画像における人体頭頂部領域の位置近似性及び面積近似性に基づいて、通行人のデプス画像と隣の通行人のデプス画像においてマッチされる人体頭頂部領域を確定してもよく、これによって通行人の追跡を実現している。マッチした人体頭頂部領域(つまり通行人)が画像中のプリセットされたレチクルを連続に通り抜けたことを検出する時、人数統計用のカウンタにカウント操作を実行させ、カウンタにより統計して得た通行人の数量を出力する。
好ましくは、通行人のデプス画像と隣の通行人のデプス画像でマッチする人体頭頂部領域を確定する時、矩形枠により確定した人体頭頂部領域を取り囲み、頭部領域を矩形枠に内接させてもよい。なお、連続する2フレームの画像間の人体頭頂部領域の位置と面積に急劇な変化がないことを考慮して、人体頭頂部領域に対する追跡は、連続する隣の画像間の人体頭頂部領域の矩形枠の対角線の交点位置座標と人体頭頂部領域の面積の大きさの連合近似性を算出することによって確定してもよい。好ましくは、以下の公式(1)を採用して隣の画像間の人体頭頂部領域の連合近似性を算出する。
好ましくは、Aposition及びAareaは下記の公式で算出してもよい。
上記算出により得られた連合近似性の値がプリセット閾値を越えると、対応する2つの人体頭頂部領域をマッチする頭頂部領域であると確定でき、そうすると、フレームの画像間の通行人の追跡を実現できる。そして、マッチした人体頭頂部領域がフレーム画像中でプリセット位置にあるレチクルを連続して通り抜けることを検出した時、人数統計用のカウンタにカウント操作を実行させることによって、通行人に対する精確な統計を実現し、最後にカウンタ統計により得られた通行人の数量を出力する。
さらに好ましくは、マッチする人体頭頂部領域が連続して通り抜けるフレーム画像中のプリセット位置にあるレチクル方向に従って、異なる方向の通行人の数量に対して統計を行ってもよい。これによって、人流方向による通行人の統計を実現でき、人流の制御により正確な依拠が与えられる。
本発明の実施例は、デプスカメラにより人体頭頂部画像を取得し、人体頭頂部の特徴に組合わせて、頭頂部画像のエッジ画素点にステップが存在することを確定し、且つ、現在の被検出領域に形成される領域の曲面が人体頭頂部の曲面と一致する時こそ、現在の被検出領域が人体頭頂部領域であると確定し、さらに通行人のデプス画像中に含まれる通行人の数量を統計して得ると共に出力し、コンピュータ設備の人体頭頂部に対する識別の正確率を大幅に向上させ、さらに通行人の精確な統計を実現している。
実施例2:
図2は、本発明の実施例2の提供する人体頭頂部の識別に基づく通行人の統計方法の実現流れを示しており、説明の便宜上、本発明の実施例に関連する部分しか示していない。詳細は次の通りである。
図2は、本発明の実施例2の提供する人体頭頂部の識別に基づく通行人の統計方法の実現流れを示しており、説明の便宜上、本発明の実施例に関連する部分しか示していない。詳細は次の通りである。
ステップS201では、デプスカメラにより撮影された通行人のデプス画像を読み出し、通行人のデプス画像と予め取得された環境平均値画像とを比較して、通行人のデプス画像の前景画像を取得する。
本発明の実施例は、通行人又は人流統計のコンピュータ設備又はシステムに適用され、通行人数量の統計を実現している。本発明の実施例において、まず、デプスカメラにより通行人を撮影して、通行人のデプス画像を取得し、続いて、通行人のデプス画像と予め取得された環境平均値画像とを比較して、通行人のデプス画像の前景画像を取得する。
好ましくは、次の公式
ステップS202では、前景画像を複数の領域に分割する。
本発明の実施例において、前景画像を複数の領域に分割する時、プリセットされたシードポイント成長アルゴリズムを用いて前景画像から複数の連通領域を探して、前景画像を対応する複数の領域に分割してもよい。例えば、領域成長法或いはシードポイント成長アルゴリズムに類似なフラッディング法及び走査線法を用いることができる。好ましくは、領域成長アルゴリズムを用いて前景画像から複数の領域を分割して、領域の分割速度を向上させる。
ステップS203では、被検出領域のエッジからn個の画素点を取り、n個の画素点を円弧の円心として、被検出領域外でn個の円弧が得られるように半径値がrである円弧をそれぞれ作成する。
本発明の実施例において、複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出する時、被検出領域のエッジでn個の画素点を取り、n個の画素点を円弧の円心として、被検出領域外に半径値がrである円弧をそれぞれ作成し、その中、rの大きさと現在領域の大きさは比例関係を呈している。例示として、図3に示すように、被検出領域のエッジはn個の画素点P1、P2、P3、P4、P5、…、Pnを取り、これらの画素点を円弧の円心として、被検出領域外で半径値がrである対応する円弧C1、C2、C3、C4、C5、…、Cnをそれぞれ作成し、その中、隣の2つの画素点の距離がプリセットされた固定値であり、勿論、具体的な状況に応じて異なる距離値に設定されてもよい。
ステップS204では、円弧毎にk個の画素点を取り、k個の画素点において画素点の値が当該円弧の円心の値よりも大きい数量を取得し、当該数量を第1の数量と記し、第1の数量とkとの比が第1のプリセット比よりも大きい時、当該円弧を正円弧に標識し、さもないと、当該円弧を負円弧に標識する。
本発明の実施例において、円弧に対して標識を行う時、後の正・負円弧の統計が容易になるように、対応する符号又は数字で直接に標記してもよい。
ステップS205では、被検出領域のエッジのn個の円弧における正円弧の数量を統計し、正円弧の数量が第1のプリセット数量を超える時、被検出領域のエッジ画素点にステップが存在すると確定する。
本発明の実施例において、n、r、k、第1のプリセット数量は何れもプリセットされた整数であり、検出の正確度に応じて設定することができ、これにより、異なる検出の正確度の要求に応じて設定することができ、人流統計システムの敏捷性を向上させ、上記方式により被検出領域のエッジ画素点にステップが存在するか否かを正確に判断でき、且つ、ステップの検出過程を簡略化し、ある程度に人体頭頂部の識別効率を向上させている。
ステップS206では、領域毎に形成される領域の曲面が人体頭頂部の曲面に一致するか否かを検出する。
ステップS207では、被検出領域に形成される領域の曲面が人体頭頂部の曲面と一致する時、現在の被検出領域が人体頭頂部領域であると確定する。
被検出領域のエッジ画素点にステップが存在することを検出した後、人体頭部をさらに精確に識別するために、本発明の実施例では、さらに、被検出領域のデプス画像の曲面形状に対して検出を行い、被検出領域に形成される領域の曲面が人体頭頂部の曲面と一致する時こそ、現在の被検出領域が人体頭頂部領域であると確定して、通行人識別の精確度を有効に向上させている。被検出領域に形成される領域の曲面が人体頭頂部の曲面と一致するか否かを検出する時、具体的に、被検出領域のデプス画像に形成される領域の曲面が、人体頭頂部の形状に該当するように上向きに凸出した曲面であるか否かを判断してもよい。
ステップS208では、前記通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力する。
本発明の実施例では、通行人の数量を統計して出力する時、好ましくは、通行人のデプス画像と隣の通行人のデプス画像における人体頭頂部領域の位置近似性及び面積近似性に基づいて、通行人のデプス画像と隣の通行人のデプス画像においてマッチされる人体頭頂部領域を確定してもよく、これによって、通行人の追跡を実現できる。マッチした人体頭頂部領域(つまり通行人)が画像中のプリセットされたレチクルを連続に通り抜けたことを検出する時、人数統計用のカウンタにカウント操作を実行させ、カウンタにより統計して得た通行人数量を出力する。
実施例3:
図4は、本発明の実施例3の提供する人体頭頂部の識別に基づく通行人の統計方法の実現流れを示しており、説明の便宜上、本発明の実施例に関連する部分しか示していない。詳細は次の通りである。
図4は、本発明の実施例3の提供する人体頭頂部の識別に基づく通行人の統計方法の実現流れを示しており、説明の便宜上、本発明の実施例に関連する部分しか示していない。詳細は次の通りである。
ステップS401では、デプスカメラにより撮影された通行人のデプス画像を読み出し、通行人のデプス画像と予め取得された環境平均値画像とを比較して、通行人のデプス画像の前景画像を取得する。
ステップS402では、前景画像を複数の領域に分割する。
ステップS403では、当該複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出する。
ステップS404では、現在の被検出領域のエッジ画素点にステップが存在する時、当該被検出領域のエッジでm個の点を取り、形状が円弧曲面である被検出領域におけるm個の点の中で隣ではない2つの点を重複せず任意に2つずつ接続して、m/2本の円弧曲線を形成する。
ステップS405では、m/2本の円弧曲線において傾き値の符号が1回しか変化しない円弧曲線の数量を取得し、当該数量を第2の数量として記し、第2の数量とm/2との比が第2のプリセット比を超える時、被検出領域と人体頭頂部の曲面が一致すると確定する。
本発明の実施例において、現在の被検出領域のエッジ画素点にステップが存在する時、さらに被検出領域と人体頭頂部の曲面形状が一致するか否かを検出する。被検出領域と人体頭頂部の曲面形状が一致するか否かを検出する時、被検出領域のエッジ上で間隔を空けて任意にm(mは偶数である)個の点(P1、P2、P3、…、Pm)を取り、図5に示すように、形状が曲面又は弧面である被検出領域における画素点によってm個の点における隣ではない2つの点を重複せず任意に2つずつ接続して、m/2本の円弧曲線を形成し、m/2本の円弧曲線において傾き値の符号が1回しか変化しない円弧曲線の数量を取得し、当該数量を第2の数量と記し、第2の数量とm/2との比が第2のプリセット比を超える時、被検出領域と人体頭頂部の曲面が一致すると確定し、これに反対すれば、現在の被検出領域と人体頭頂部の曲面が一致しないと確定する。
本発明の実施例において、mはプリセットされた整数である。本発明の実施例の上記方式により現在の被検出領域が人体頭頂部の曲面形状と一致するか否かを正確に判断でき、人体頭頂部の識別の正確度を向上させる。
ステップS406では、通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力する。
本発明の実施例において、通行人の数量を統計して出力する時、好ましくは、通行人のデプス画像と隣の通行人のデプス画像における人体頭頂部領域の位置近似性及び面積近似性に基づいて、通行人のデプス画像と隣の通行人のデプス画像においてマッチされる人体頭頂部領域を確定してもよく、これによって、通行人の追跡を実現できる。マッチした人体頭頂部領域(つまり通行人)が画像中のプリセットされたレチクルを連続に通り抜けたことを検出した時、人数統計用のカウンタにカウント操作を実行させ、カウンタにより統計して得た通行人数量を出力する。
本発明の実施例において、被検出領域と人体頭頂部の曲面形状が一致するか否かを検出する時、当該被検出領域のエッジでm個の点を取り、形状が円弧曲面である被検出領域におけるm個の点の中で隣ではない2つの点を重複せず任意に2つずつ接続して、m/2本の円弧曲線を形成し、m/2本の円弧曲線において傾き値の符号が1回しか変化しない円弧曲線の数量を取得し、当該数量とm/2との比が第2のプリセット比を超える時、被検出領域と人体頭頂部の曲面が一致すると確定して、人体頭頂部の識別正確度を向上させると共に、人体頭頂部の形状判断過程を簡略化し、すぐにユーザへ通行人数量をフィードバックすることができ、通行人の統計効率を向上させている。
実施例4:
図6は、本発明の実施例4の提供する人体頭頂部の識別に基づく通行人の統計装置の構造を示しており、説明の便宜上、本発明の実施例に関連する部分しか示していない。その中、
デプスカメラにより撮影された通行人のデプス画像を読み出し、通行人のデプス画像と予め取得された環境平均値画像とを比較して、通行人のデプス画像の前景画像を取得するための前景取得手段61と、
前景画像を複数の領域に分割し、複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出すると共に、それぞれの領域に形成される領域の曲面が人体頭頂部の曲面と一致するか否かを検出するための領域検出手段62と、
現在の被検出領域のエッジ画素点にステップが存在し、且つ、現在の被検出領域に形成される領域の曲面が人体頭頂部の曲面と一致すると、現在の被検出領域が人体頭頂部領域であると確定するための頭頂部確定手段63と、
通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力するための通行人数量出力手段64とを備えている。
図6は、本発明の実施例4の提供する人体頭頂部の識別に基づく通行人の統計装置の構造を示しており、説明の便宜上、本発明の実施例に関連する部分しか示していない。その中、
デプスカメラにより撮影された通行人のデプス画像を読み出し、通行人のデプス画像と予め取得された環境平均値画像とを比較して、通行人のデプス画像の前景画像を取得するための前景取得手段61と、
前景画像を複数の領域に分割し、複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出すると共に、それぞれの領域に形成される領域の曲面が人体頭頂部の曲面と一致するか否かを検出するための領域検出手段62と、
現在の被検出領域のエッジ画素点にステップが存在し、且つ、現在の被検出領域に形成される領域の曲面が人体頭頂部の曲面と一致すると、現在の被検出領域が人体頭頂部領域であると確定するための頭頂部確定手段63と、
通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力するための通行人数量出力手段64とを備えている。
本発明の実施例において、人体頭頂部の識別に基づく通行人の統計装置の各手段は、対応するハードウェアやソフトウェアユニットで実現でき、各手段は、独立なソフト・ハードウェアユニットであってもよく、コンピュータ設備に集積した1つのソフト・ハードウェアユニットであってもよい。ここで、本発明はこれらによって限定されるものではない。各手段の具体的な実施の形態は実施例1の対応するステップの記述を参考すればよく、ここではさらに贅言しない。
実施例5:
図7は、本発明の実施例5の提供する人体頭頂部の識別に基づく通行人の統計装置の構造を示しており、説明の便宜上、本発明の実施例と関連する部分しか示していない。その中、
デプスカメラにより撮影された通行人のデプス画像を読み出し、通行人のデプス画像と予め取得された環境平均値画像とを比較して、通行人のデプス画像の前景画像を取得するための前景取得手段71と、
前景画像を複数の領域に分割し、複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出すると共に、それぞれの領域に形成される領域の曲面が人体頭頂部の曲面と一致するか否かを検出するための領域検出手段72と、
現在の被検出領域のエッジ画素点にステップが存在し、且つ、現在の被検出領域に形成される領域の曲面が人体頭頂部の曲面と一致すると、現在の被検出領域が人体頭頂部領域であると確定するための頭頂部確定手段73と、
通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力するための通行人数量出力手段74とを備えている。
図7は、本発明の実施例5の提供する人体頭頂部の識別に基づく通行人の統計装置の構造を示しており、説明の便宜上、本発明の実施例と関連する部分しか示していない。その中、
デプスカメラにより撮影された通行人のデプス画像を読み出し、通行人のデプス画像と予め取得された環境平均値画像とを比較して、通行人のデプス画像の前景画像を取得するための前景取得手段71と、
前景画像を複数の領域に分割し、複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出すると共に、それぞれの領域に形成される領域の曲面が人体頭頂部の曲面と一致するか否かを検出するための領域検出手段72と、
現在の被検出領域のエッジ画素点にステップが存在し、且つ、現在の被検出領域に形成される領域の曲面が人体頭頂部の曲面と一致すると、現在の被検出領域が人体頭頂部領域であると確定するための頭頂部確定手段73と、
通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力するための通行人数量出力手段74とを備えている。
好ましくは、領域検出手段72は、
被検出領域のエッジからn個の画素点を取り、前記n個の画素点を円弧の円心として、前記被検出領域外でn個の円弧が得られるように半径値がrである円弧を作成するための、前記n個の画素点における隣の2つの画素点の距離がプリセットされた固定値である円弧設定手段721と、
前記円弧毎にk個の画素点を取り、前記k個の画素点において画素点の値が当該円弧の円心の値よりも大きい数量を取得し、当該数量を第1の数量と記し、前記第1の数量とkとの比が第1のプリセット比よりも大きい時、当該円弧を正円弧に標識し、さもないと、当該円弧を負円弧に標識するための円弧標識手段722と、
前記被検出領域のエッジの前記n個の円弧における正円弧の数量を統計し、前記正円弧の数量が第1のプリセット数量を超える時、前記被検出領域のエッジ画素点にステップが存在すると確定するためのステップ確定手段723とを備えている。
被検出領域のエッジからn個の画素点を取り、前記n個の画素点を円弧の円心として、前記被検出領域外でn個の円弧が得られるように半径値がrである円弧を作成するための、前記n個の画素点における隣の2つの画素点の距離がプリセットされた固定値である円弧設定手段721と、
前記円弧毎にk個の画素点を取り、前記k個の画素点において画素点の値が当該円弧の円心の値よりも大きい数量を取得し、当該数量を第1の数量と記し、前記第1の数量とkとの比が第1のプリセット比よりも大きい時、当該円弧を正円弧に標識し、さもないと、当該円弧を負円弧に標識するための円弧標識手段722と、
前記被検出領域のエッジの前記n個の円弧における正円弧の数量を統計し、前記正円弧の数量が第1のプリセット数量を超える時、前記被検出領域のエッジ画素点にステップが存在すると確定するためのステップ確定手段723とを備えている。
さらに好ましくは、領域検出手段72は、さらに、
被検出領域のエッジでm個の点(mは偶数である)を取り、形状が円弧曲面である前記被検出領域における前記m個の点で隣ではない2つの点を重複せず任意に2つずつ接続して、m/2本の円弧曲線を形成するための曲線生成手段724と、
前記m/2本の円弧曲線において傾き値の符号が1回しか変化しない円弧曲線の数量を取得し、当該数量を第2の数量として記し、前記第2の数量とm/2との比が第2のプリセット比を超える時、前記被検出領域と前記人体頭頂部の曲面が一致すると確定するための曲面確定手段725とを備えてもよい。
被検出領域のエッジでm個の点(mは偶数である)を取り、形状が円弧曲面である前記被検出領域における前記m個の点で隣ではない2つの点を重複せず任意に2つずつ接続して、m/2本の円弧曲線を形成するための曲線生成手段724と、
前記m/2本の円弧曲線において傾き値の符号が1回しか変化しない円弧曲線の数量を取得し、当該数量を第2の数量として記し、前記第2の数量とm/2との比が第2のプリセット比を超える時、前記被検出領域と前記人体頭頂部の曲面が一致すると確定するための曲面確定手段725とを備えてもよい。
好ましくは、通行人数量出力手段74は、
前記通行人のデプス画像と前記隣の通行人のデプス画像において人体頭頂部領域の位置近似性及び面積近似性に基づいて、前記通行人のデプス画像と前記隣の通行人のデプス画像においてマッチされる人体頭頂部領域を確定するためのマッチング頭頂確定手段741と、
前記マッチした人体頭頂部領域がプリセットされたレチクルを連続に通り抜けたことを検出する時、人数統計用のカウンタにカウント操作を実行させるためのカウント手段742と、
前記カウンタにより統計して得た通行人数量を出力するための数量出力手段743とを備えている。
前記通行人のデプス画像と前記隣の通行人のデプス画像において人体頭頂部領域の位置近似性及び面積近似性に基づいて、前記通行人のデプス画像と前記隣の通行人のデプス画像においてマッチされる人体頭頂部領域を確定するためのマッチング頭頂確定手段741と、
前記マッチした人体頭頂部領域がプリセットされたレチクルを連続に通り抜けたことを検出する時、人数統計用のカウンタにカウント操作を実行させるためのカウント手段742と、
前記カウンタにより統計して得た通行人数量を出力するための数量出力手段743とを備えている。
本発明の実施例において、人体頭頂部の識別に基づく通行人の統計装置の各手段は、対応するハードウェアやソフトウェアユニットで実現でき、各手段は、独立なソフト・ハードウェアユニットであってもよく、集積した1つのソフト・ハードウェアユニットであってもよい。ここで、本発明はこれらによって限定されるものではない。各手段の具体的な実施の形態は前述実施例2及び3の記述を参考すればよく、ここではさらに贅言しない。
以上は本発明の好ましい実施例に過ぎず、本発明を限定するものではない。本発明の精神及び原則内でのいかなる改正、同等取替え及び改善等は、いずれも本発明の保護範囲に含まれることである。
Claims (10)
- 人体頭頂部の識別に基づく通行人の統計方法であって、
デプスカメラにより撮影された通行人のデプス画像を読み出し、前記通行人のデプス画像と予め取得された環境平均値画像とを比較して、前記通行人のデプス画像の前景画像を取得するステップと、
前記前景画像を複数の領域に分割し、前記複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出すると共に、前記それぞれの領域に形成される領域の曲面が人体頭頂部の曲面と一致するか否かを検出するステップと、
現在の被検出領域のエッジ画素点にステップが存在し、且つ、前記現在の被検出領域に形成される領域の曲面が前記人体頭頂部の曲面と一致すると、前記現在の被検出領域が人体頭頂部領域であると確定するステップと、
前記通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力するステップとを含むことを特徴とする人体頭頂部の識別に基づく通行人の統計方法。 - 前記通行人のデプス画像と予め取得された環境平均値画像とを比較するステップの前に、
プリセット数量の、通行人の歩き環境の環境画像を取得し、前記環境平均値画像が得られるように前記プリセット数量の環境画像の平均値を算出することをさらに含むことを特徴とする請求項1に記載の方法。 - 前記前景画像を複数の領域に分割するステップは、
プリセットされたシードポイント成長アルゴリズムを用いて前記前景画像から複数の連通領域を探して、前記前景画像を対応する複数の領域に分割することを含むことを特徴とする請求項1に記載の方法。 - 前記複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出するステップは、
被検出領域のエッジからn個の画素点を取り、前記n個の画素点を円弧の円心として、前記被検出領域外でn個の円弧が得られるように半径値がrである円弧をそれぞれ作成する、前記n個の画素点において隣の2つの画素点の距離がプリセットされた固定値であることと、
前記円弧毎にk個の画素点を取り、前記k個の画素点において画素点の値が当該円弧の円心の値よりも大きい数量を取得し、当該数量を第1の数量と記し、前記第1の数量とkとの比が第1のプリセット比よりも大きい時、当該円弧を正円弧に標識し、さもないと、当該円弧を負円弧に標識することと、
前記被検出領域のエッジの前記n個の円弧における正円弧の数量を統計し、前記正円弧の数量が第1のプリセット数量を超える時、前記被検出領域のエッジ画素点にステップが存在すると確定することとを含むことを特徴とする請求項1に記載の方法。 - 前記それぞれの領域に形成される領域の曲面が人体頭頂部の曲面と一致するか否かを検出するステップは、
被検出領域のエッジでm個の点(mは偶数である)を取り、形状が円弧曲面である前記被検出領域における前記m個の点の中で隣ではない2つの点を重複せず任意に2つずつ接続して、m/2本の円弧曲線を形成することと、
前記m/2本の円弧曲線において傾き値の符号が1回しか変化しない円弧曲線の数量を取得し、当該数量を第2の数量として記し、前記第2の数量とm/2との比が第2のプリセット比を超える時、前記被検出領域と前記人体頭頂部の曲面が一致すると確定することとを含むことを特徴とする請求項1に記載の方法。 - 前記通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力するステップは、
前記通行人のデプス画像と前記隣の通行人のデプス画像における人体頭頂部領域の位置近似性及び面積近似性に基づいて、前記通行人のデプス画像と前記隣の通行人のデプス画像においてマッチされる人体頭頂部領域を確定することと、
前記マッチした人体頭頂部領域がプリセットされたレチクルを連続に通り抜けたことを検出する時、人数統計用のカウンタにカウント操作を実行させることと、
前記カウンタにより統計して得た通行人数量を出力することとを含むことを特徴とする請求項1に記載の方法。 - 人体頭頂部の識別に基づく通行人の統計装置であって、
デプスカメラにより撮影された通行人のデプス画像を読み出し、前記通行人のデプス画像と予め取得された環境平均値画像とを比較して、前記通行人のデプス画像の前景画像を取得するための前景取得手段と、
前記前景画像を複数の領域に分割し、前記複数の領域におけるそれぞれの領域のエッジ画素点にステップが存在するか否かを検出すると共に、前記それぞれの領域に形成される領域の曲面が人体頭頂部の曲面と一致するか否かを検出するための領域検出手段と、
現在の被検出領域のエッジ画素点にステップが存在し、且つ、前記現在の被検出領域に形成される領域の曲面が前記人体頭頂部の曲面と一致すると、前記現在の被検出領域が人体頭頂部領域であると確定するための頭頂部確定手段と、
前記通行人のデプス画像から確定された人体頭頂部領域と隣の通行人のデプス画像から確定された人体頭頂部領域とにより、通行人の数量を統計して出力するための通行人数量出力手段とを備えることを特徴とする人体頭頂部の識別に基づく通行人の統計装置。 - 前記領域検出手段は、
被検出領域のエッジからn個の画素点を取り、前記n個の画素点を円弧の円心として、前記被検出領域外でn個の円弧が得られるように半径値がrである円弧を作成するための、前記n個の画素点における隣の2つの画素点の距離がプリセットされた固定値である円弧設定手段と、
前記円弧毎にk個の画素点を取り、前記k個の画素点において画素点の値が当該円弧の円心の値よりも大きい数量を取得し、当該数量を第1の数量と記し、前記第1の数量とkとの比が第1のプリセット比よりも大きい時、当該円弧を正円弧に標識し、さもないと、当該円弧を負円弧に標識するための円弧標識手段と、
前記被検出領域のエッジの前記n個の円弧における正円弧の数量を統計し、前記正円弧の数量が第1のプリセット数量を超える時、前記被検出領域のエッジ画素点にステップが存在すると確定するためのステップ確定手段とを備えることを特徴とする請求項7に記載の装置。 - 前記領域検出手段は、
被検出領域のエッジでm個の点(mは偶数である)を取り、形状が円弧曲面である前記被検出領域における前記m個の点で隣ではない2つの点を重複せず任意に2つずつ接続して、m/2本の円弧曲線を形成するための曲線生成手段と、
前記m/2本の円弧曲線において傾き値の符号が1回しか変化しない円弧曲線の数量を取得し、当該数量を第2の数量として記し、前記第2の数量とm/2との比が第2のプリセット比を超える時、前記被検出領域と前記人体頭頂部の曲面が一致すると確定するための曲面確定手段とを備えることを特徴とする請求項7に記載の装置。 - 前記通行人数量出力手段は、
前記通行人のデプス画像と前記隣の通行人のデプス画像において人体頭頂部領域の位置近似性及び面積近似性に基づいて、前記通行人のデプス画像と前記隣の通行人のデプス画像においてマッチされる人体頭頂部領域を確定するためのマッチング頭頂確定手段と、
前記マッチした人体頭頂部領域がプリセットされたレチクルを連続に通り抜けたことを検出する時、人数統計用のカウンタにカウント操作を実行させるためのカウント手段と、
前記カウンタにより統計して得た通行人数量を出力するための数量出力手段とを備えることを特徴とする請求項7に記載の装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610931928.0A CN106530310B (zh) | 2016-10-25 | 2016-10-25 | 一种基于人体头顶部识别的行人统计方法及装置 |
CN201610931928.0 | 2016-10-25 | ||
PCT/CN2016/104879 WO2018076392A1 (zh) | 2016-10-25 | 2016-11-07 | 一种基于人体头顶部识别的行人统计方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018535457A JP2018535457A (ja) | 2018-11-29 |
JP6453488B2 true JP6453488B2 (ja) | 2019-01-16 |
Family
ID=58293233
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017555473A Expired - Fee Related JP6453488B2 (ja) | 2016-10-25 | 2016-11-07 | 人体頭頂部の識別に基づく通行人の統計方法及び装置 |
Country Status (3)
Country | Link |
---|---|
JP (1) | JP6453488B2 (ja) |
CN (1) | CN106530310B (ja) |
WO (1) | WO2018076392A1 (ja) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109271847B (zh) * | 2018-08-01 | 2023-04-07 | 创新先进技术有限公司 | 无人结算场景中异常检测方法、装置及设备 |
CN109284701A (zh) * | 2018-09-06 | 2019-01-29 | 南京威尔思汽车部件科技有限公司 | 一种基于区域对比的行车识别方法 |
CN109700464A (zh) * | 2018-12-29 | 2019-05-03 | 朱新玲 | 就诊号源发布系统 |
CN109741370B (zh) * | 2019-01-04 | 2020-09-11 | 北京环境特性研究所 | 一种目标跟踪方法和装置 |
CN110705417A (zh) * | 2019-09-24 | 2020-01-17 | 杭州驭光光电科技有限公司 | 人头计数方法及光投射装置 |
CN111144231B (zh) * | 2019-12-09 | 2022-04-15 | 深圳市鸿逸达科技有限公司 | 一种基于深度图像的自助通道防尾随检测方法和系统 |
CN111914704B (zh) * | 2020-07-20 | 2024-03-19 | 北京格灵深瞳信息技术有限公司 | 一种三轮车载人的识别方法、装置、电子设备及存储介质 |
CN112587035B (zh) * | 2020-12-08 | 2023-05-05 | 珠海一微半导体股份有限公司 | 移动机器人识别工作场景的控制方法和系统 |
CN113963318B (zh) * | 2021-12-22 | 2022-03-25 | 北京的卢深视科技有限公司 | 人流量统计方法、装置、电子设备和存储介质 |
CN116612279B (zh) * | 2023-04-28 | 2024-02-02 | 广东科技学院 | 目标检测的方法、装置、网络设备及存储介质 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI448990B (zh) * | 2012-09-07 | 2014-08-11 | Univ Nat Chiao Tung | 以分層掃描法實現即時人數計數 |
CN102930524A (zh) * | 2012-09-11 | 2013-02-13 | 无锡数字奥森科技有限公司 | 一种基于垂直放置的深度摄像头的人头检测方法 |
CN103839038A (zh) * | 2012-11-23 | 2014-06-04 | 浙江大华技术股份有限公司 | 一种人数统计的方法及装置 |
CN103150559B (zh) * | 2013-03-01 | 2016-07-06 | 南京理工大学 | 基于Kinect三维深度图像的头部识别与跟踪方法 |
CN103530874B (zh) * | 2013-10-09 | 2016-06-29 | 上海大学 | 基于Kinect的人流计数方法 |
CN103971380B (zh) * | 2014-05-05 | 2016-09-28 | 中国民航大学 | 基于rgb-d的行人尾随检测方法 |
CN104751491B (zh) * | 2015-04-10 | 2018-01-23 | 中国科学院宁波材料技术与工程研究所 | 一种人群跟踪及人流量统计方法及装置 |
CN104835147A (zh) * | 2015-04-15 | 2015-08-12 | 中国科学院上海微系统与信息技术研究所 | 基于三维深度图数据的密集人流量实时检测方法 |
-
2016
- 2016-10-25 CN CN201610931928.0A patent/CN106530310B/zh not_active Expired - Fee Related
- 2016-11-07 WO PCT/CN2016/104879 patent/WO2018076392A1/zh active Application Filing
- 2016-11-07 JP JP2017555473A patent/JP6453488B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2018535457A (ja) | 2018-11-29 |
CN106530310B (zh) | 2018-02-23 |
CN106530310A (zh) | 2017-03-22 |
WO2018076392A1 (zh) | 2018-05-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6453488B2 (ja) | 人体頭頂部の識別に基づく通行人の統計方法及び装置 | |
CN106446873B (zh) | 人脸检测方法及装置 | |
US10650249B2 (en) | Method and device for counting pedestrians based on identification of head top of human body | |
JP6549797B2 (ja) | 通行人の頭部識別方法及びシステム | |
KR101184097B1 (ko) | 얼굴 정면포즈 판단 방법 | |
CN103325112B (zh) | 动态场景中运动目标快速检测方法 | |
Keller et al. | A new benchmark for stereo-based pedestrian detection | |
CN112257502A (zh) | 一种监控视频行人识别与跟踪方法、装置及存储介质 | |
CN111160291B (zh) | 基于深度信息与cnn的人眼检测方法 | |
US20130243343A1 (en) | Method and device for people group detection | |
US20130010095A1 (en) | Face recognition device and face recognition method | |
CN106821694A (zh) | 一种基于智能手机的移动导盲系统 | |
CN102915433B (zh) | 基于字符组合的车牌定位和识别方法 | |
CN104517102A (zh) | 学生课堂注意力检测方法及系统 | |
Qian et al. | Oriented spatial transformer network for pedestrian detection using fish-eye camera | |
CN102609724B (zh) | 一种基于双摄像头的周围环境信息提示方法 | |
CN104820965A (zh) | 一种低空无人机影像无地理编码快速拼接方法 | |
CN105022999A (zh) | 一种人码伴随实时采集系统 | |
CN108921881A (zh) | 一种基于单应性约束的跨摄像头目标跟踪方法 | |
CN113139437B (zh) | 一种基于YOLOv3算法的安全帽佩戴检查方法 | |
CN112101208A (zh) | 高龄老人特征串联融合手势识别方法及装置 | |
CN107862713A (zh) | 针对轮询会场的摄像机偏转实时检测预警方法及模块 | |
CN114612933B (zh) | 单目社交距离检测追踪方法 | |
CN112541403A (zh) | 一种利用红外摄像头的室内人员跌倒检测方法 | |
CN104331708B (zh) | 一种人行横道线自动检测分析方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171023 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181130 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181212 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6453488 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |