JP7347443B2 - 領域検出装置 - Google Patents

領域検出装置 Download PDF

Info

Publication number
JP7347443B2
JP7347443B2 JP2020557543A JP2020557543A JP7347443B2 JP 7347443 B2 JP7347443 B2 JP 7347443B2 JP 2020557543 A JP2020557543 A JP 2020557543A JP 2020557543 A JP2020557543 A JP 2020557543A JP 7347443 B2 JP7347443 B2 JP 7347443B2
Authority
JP
Japan
Prior art keywords
contour
nail
image
line segments
contour candidate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020557543A
Other languages
English (en)
Other versions
JPWO2020110347A1 (ja
Inventor
大輔 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Funai Electric Co Ltd
Original Assignee
Funai Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Funai Electric Co Ltd filed Critical Funai Electric Co Ltd
Publication of JPWO2020110347A1 publication Critical patent/JPWO2020110347A1/ja
Application granted granted Critical
Publication of JP7347443B2 publication Critical patent/JP7347443B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/62Analysis of geometric attributes of area, perimeter, diameter or volume
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/12Edge-based segmentation
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/64Analysis of geometric attributes of convexity or concavity
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/25Determination of region of interest [ROI] or a volume of interest [VOI]
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20048Transform domain processing
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03Recognition of patterns in medical or anatomical images

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Geometry (AREA)
  • Human Computer Interaction (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Description

本発明は、領域検出装置に関する。
従来、検出対象となる領域に予め他の領域と区別しやすい色でマーキングを行い、その色を検出することで、検出対象となる領域を検出する領域検出装置が知られている。
特開2012-146182号公報 国際公開第2012/124686号 特開2018-55364号公報 特開2015-13002号公報
しかし、爪にマーキングを行わない場合や、マーキングを兼ねるベースコートが透明な場合には、色による爪の領域の検出は難しい。
そこで、本発明は、爪の領域を検出することができる領域検出装置を提供することを目的とする。
上記目的を達成するために、本発明の一態様に係る領域検出装置は、爪を含む指先の指先画像を取得する取得部と、前記指先画像を、前記指先画像における前記爪の内側の一の点を極とする極座標画像に変換する変換部と、前記極座標画像を用いて前記爪の領域を検出する検出部と、を備える。
爪の輪郭は、閉構造である。このため、爪の内側の一の点を極とする極座標画像において、爪の輪郭は、角度方向に伸びる線分として現れる。このため、爪の内側の一の点を極とする極座標画像を用いることで、比較的簡易かつ比較的的確に爪の領域を検出することができる。
このように、上記構成の領域検出装置によると、爪の領域を検出することができる。
例えば、前記検出部は、前記極座標画像における画素のうち、前記爪の輪郭に位置する画素の候補となる複数の輪郭候補画素を抽出し、前記複数の輪郭候補画素のうち、前記極座標画像における距離方向を除く方向において列状に隣接する輪郭候補画素群からなる1以上の輪郭候補線分を抽出し、抽出した前記1以上の輪郭候補線分に基づいて、前記爪の領域を検出するとしてもよい。
これにより、より精度よく爪の領域を検出することができる。
例えば、前記検出部は、前記1以上の輪郭候補線分の抽出において複数の輪郭候補線分を抽出した場合に、抽出した前記複数の輪郭候補線分の中から、前記極座標画像における距離方向において互いに重ならない1以上の輪郭候補線分を選択し、選択した前記1以上の輪郭候補線分に基づいて、前記爪の領域を検出するとしてもよい。
これにより、より精度よく爪の領域を検出することができる。
例えば、前記検出部は、前記1以上の輪郭候補線分の選択において、択一的な選択の対象となる複数の輪郭候補線分が存在する場合に、前記択一的な選択の対象となる複数の輪郭候補線分のそれぞれに対して、より長い輪郭候補線分の方が、より重みが重くなるように重み付けをして、前記択一的な選択を行うとしてもよい。
これにより、より精度よく爪の領域を検出することができる。
例えば、前記検出部は、前記1以上の輪郭候補線分の選択において、択一的な選択の対象となる複数の輪郭候補線分が存在する場合に、前記択一的な選択の対象となる複数の輪郭候補線分のそれぞれに対して、前記極からの距離がより短い輪郭候補線分の方が、より重みが重くなるように重み付けをして、前記択一的な選択を行うとしてもよい。
これにより、より精度よく爪の領域を検出することができる。
例えば、前記検出部は、前記1以上の輪郭候補線分の選択において複数の輪郭候補線分を選択した場合に、選択した前記複数の輪郭候補線分を結合して結合輪郭線分を算出し、算出した結合輪郭線分に基づいて、前記爪の領域を検出するとしてもよい。
これにより、より精度よく爪の領域を検出することができる。
例えば、前記検出部は、前記結合輪郭線分に対して、前記変換の逆変換を行い、逆変換した前記結合輪郭線分に基づいて、前記爪の領域を抽出するとしてもよい。
これにより、より精度よく爪の領域を検出することができる。
例えば、前記検出部は、逆変換した前記結合輪郭線分に凹部が存在する場合に、当該結合輪郭線分に対して凸包処理を行って前記爪の輪郭を算出し、算出した前記爪の輪郭に基づいて、前記爪の領域を抽出するとしてもよい。
これにより、より精度よく爪の領域を検出することができる。
例えば、さらに、前記指先画像から、前記一の点を特定する特定部を備えるとしてもよい。
これにより、一の点を特定することができる。
例えば、前記特定部は、前記指先画像から、前記指先の輪郭を抽出し、抽出した前記指先の輪郭に外接する長方形を算出し、算出した前記長方形の中心を、前記一の点として特定するとしてもよい。
これにより、より精度よく一の点を特定することができる。
例えば、さらに、画像を撮像する撮像部を備え、前記取得部は、前記撮像部により撮像された画像を、前記指先画像として取得するとしてもよい。
これにより、指先画像を自装置で撮像することができる。
本発明によると、爪の領域を検出することができる領域検出装置が提供される。
図1は、実施の形態1に係る領域検出装置の構成を示すブロック図である。 図2は、実施の形態1に係る指先画像の一例である。 図3は、実施の形態1に係る第1輪郭強調画像の一例である。 図4は、実施の形態1に係るマスク画像の一例である。 図5は、実施の形態1に係る第2輪郭強調画像の一例である。 図6は、実施の形態1に係る変換部が座標変換処理を行う様子の一例を示す模式図である。 図7は、実施の形態1に係る極座標画像の一例である。 図8は、実施の形態1に係る検出部が複数の輪郭候補画素を抽出する様子の一例を示す模式図である。 図9は、実施の形態1に係る、抽出された1以上の輪郭候補線分の一例である。 図10は、実施の形態1に係る、選択された1以上の輪郭候補線分の一例である。 図11は、実施の形態1に係る結合輪郭線の一例である。 図12は、実施の形態1に係る逆変換線の一例である。 図13は、凹部が存在する逆変換線に取り囲まれた領域の一例を示す模式図である。 図14は、凸包処理後の逆変換線に取り囲まれた領域の一例を示す模式図である。 図15は、実施の形態1に係る爪の輪郭の一例である。 図16は、実施の形態1に係る第1爪領域検出処理のフローチャートである。 図17は、実施の形態2に係る領域検出装置の構成を示すブロック図である。 図18は、実施の形態2に係る撮像部の斜視図である。 図19は、実施の形態2に係る第2爪領域検出処理のフローチャートである。 図20は、実施の形態3に係る領域検出装置の構成を示すブロック図である。 図21は、実施の形態3に係る第3爪領域検出処理のフローチャートである。 図22は、実施の形態4に係る領域検出装置の構成を示すブロック図である。 図23は、実施の形態3に係る第4爪領域検出処理のフローチャートである。
以下、本発明の実施の形態について、図面を用いて詳細に説明する。なお、以下で説明する実施の形態は、いずれも包括的または具体的な例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置位置及び接続形態などは、一例であり、本発明を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、独立請求項に記載されていない構成要素については、任意の構成要素として説明される。
(実施の形態1)
以下、実施の形態1に係る領域検出装置について説明する。この領域検出装置は、爪を含む指先の指先画像から、爪の領域を検出する装置である。ここで、指先画像とは、指先を、爪のある面の正面上方から見下ろしで撮影した画像である。
[構成]
図1は、実施の形態1に係る領域検出装置1の構成を示すブロック図である。
図1に示されるように、領域検出装置1は、取得部10と、特定部20と、変換部30と、検出部40とを含んで構成される。
領域検出装置1は、例えば、プロセッサとメモリとを含んで構成されるコンピュータによって実現されてもよい。この場合、領域検出装置1の各構成要素は、プロセッサがメモリに記憶されるプログラムを実行することで実現される。また、領域検出装置1は、例えば、ロジック回路によって実現されてもよいし、また、例えば、ロジック回路とコンピュータとの組み合わせによって実現されてもよい。
取得部10は、爪を含む指先の指先画像を取得する。取得部10は、例えば、外部の撮像装置との間で有線又は無線による通信が可能となる通信インターフェースを備え、通信可能に接続される撮像装置から指先画像を取得してもよい。また、取得部10は、例えば、USB(Universal Serial Bus)ポートを備え、USBポートに装着されたUSBメモリから指先画像を取得してもよい。
図2は、取得部10によって取得された指先画像の一例である。
特定部20は、取得部10によって取得された指先画像から、爪の内側の一の点を特定する。一の点は、爪の内側の点であれば、必ずしもその位置は限定されないが、爪の中央付近の位置が望ましい。特定部20は、例えば、指先画像から指先の輪郭を抽出し、抽出した指先の輪郭に外接する長方形を算出し、算出した長方形の中心を、一の点として特定してもよい。
変換部30は、取得部10によって取得された指先画像を、特定部20によって特定された一の点を極とする極座標画像に変換する。ここで、極座標画像とは、指先画像を構成する各画素の位置が、極を中心とする極座標系で定義される極からの距離(動径)と極を中心とする角度(偏角)とをそれぞれ縦軸、横軸とする平面上の位置となるように指先画像を変換(以下、この変換を行う処理のことを「座標変換処理」ともいう。)することで得られる画像のことをいう。
以下、変換部30の行う極座標画像への変換の一具体例について、図3~図7を用いて説明する。
変換部30は、まず、指先画像に対して、輪郭を強調する輪郭強調処理を行い、指先画像を第1輪郭強調画像へと加工する。
図3は、変換部30によって加工された第1輪郭強調画像の一例である。
次に、変換部30は、指先画像から指先の輪郭を抽出し、抽出した指先の輪郭に基づいて、指先以外の領域をマスクするためのマスク画像を生成する。
図4は、変換部30によって生成されたマスク画像の一例である。
次に、変換部30は、マスク画像を用いて、指先以外の領域をマスクするマスク処理を行い、第1輪郭強調画像を、指先以外の領域がマスクされた第2輪郭強調画像へと加工する。
図5は、変換部30によって加工された第2輪郭強調画像の一例である。
次に、変換部30は、第2輪郭強調画像に対して座標変換処理を行い、第2輪郭強調画像を極座標画像へと変換する。
図6は、変換部30が、第2輪郭強調画像に対して座標変換処理を行う様子の一例を示す模式図である。
図6に示されるように、変換部30は、第2輪郭強調画像に対して、一の点80を極とし、極を中心として12時の方向を始点とする時計周りに、各画素の極からの距離(動径)と、極を中心とする角度(偏角)とを走査する。(走査する方向は、反時計回りでもよい。)そして、変換部30は、走査により得られた、各画素の極からの距離と極を中心とする角度とを用いて座標変換処理を行うことで、第2輪郭強調画像を極座標画像へと変換する。
図7は、変換部30によって変換された極座標画像の一例である。図7に例示される極座標画像は、左側から右側へと、偏角「0°」側の画素から偏角「360°」側の画素へと画素が並び、上側から下側へと、動径「0」側の画素から動径の大きい側の画素へと画素が並ぶ画像である。
再び図1に戻り、領域検出装置1の説明を続ける。
検出部40は、変換部30によって変換された極座標画像を用いて爪の領域を検出する。
以下、検出部40が行う爪の領域の検出の一具体例について、図8~図15を用いて説明する。
検出部40は、まず、極座標画像における画素のうち、爪の輪郭に位置する画素の候補となる複数の輪郭候補画素を抽出する。
図8は、検出部40が、複数の輪郭候補画素を抽出する様子の一例を示す模式図である。図8中の黒い点のそれぞれが、複数の輪郭候補画素のそれぞれを示す。
図8に示されるように、検出部40は、一例として、極座標画像の画素のうち、輪郭強調処理において強調された輪郭の部分に位置する画素のそれぞれを、輪郭候補画素のそれぞれとして抽出する。
次に、検出部40は、抽出した複数の輪郭候補画素のうち、極座標画像における距離方向(図8に例示される輪郭候補画像においては、上下方向)を除く方向において列状に隣接する輪郭候補画素群からなる1以上の輪郭候補線分を抽出する。ここで、輪郭候補線分の抽出対象から、極座標画像における距離方向において列状に隣接する輪郭候補画素群を除外する理由は、極が爪の輪郭の内側に位置するために、極座標画像では、爪の輪郭が距離方向において列状となる線分として現れることがないからである。
図9は、検出部40によって抽出された1以上の輪郭候補線分の一例である。
検出部40は、1以上の輪郭候補線分の抽出において複数の輪郭候補線分を抽出した場合に、極座標画像における距離方向に重ならない1以上の輪郭候補線分を選択する。
図10は、検出部40によって選択された1以上の輪郭候補線分の一例である。図10において、強調された線分のそれぞれが、選択された1以上の輪郭候補線分のそれぞれを示す。
検出部40は、1以上の輪郭候補線分の選択において、択一的な選択の対象となる複数の輪郭候補線分が存在する場合に、択一的な選択の対象となる複数の輪郭候補線分のそれぞれに対して重み付けをして、上記択一的な選択を行う。この重み付けは、爪の輪郭に対応する線分として、よりもっともらしいと推定される輪郭候補線分により重みが重くなるように重み付けすることが望ましい。
検出部40は、例えば、より長い輪郭候補線分の方が、より重みが重くなるように重み付けをしてもよい。また、検出部40は、例えば、より極からの距離が短い輪郭候補線分の方が、より重みが重くなるように重み付けをしてもよい。
検出部40は、1以上の輪郭候補線分の選択において複数の輪郭候補線分を選択した場合に、選択した複数の輪郭候補線分を結合して結合輪郭線を算出する。ここで、検出部40は、第1の輪郭候補線分と第2の輪郭候補線分とを結合する際には、第1の輪郭候補線分の2つの線分端のうちの、第2の輪郭候補線分に近い側の線分端と、第2の輪郭候補線分の2つの線分端のうちの、第1の輪郭候補線分に近い側の線分端との間を、直線で補間することで、第1の輪郭候補線分と第2の輪郭候補線分とを結合する。
図11は、検出部40によって結合された結合輪郭線の一例である。図11において、図中の左側面から右側面へと続く1本の強調された線が、結合輪郭線を示す。
検出部40は、1以上の輪郭候補線分の選択において1の輪郭候補線分を選択した場合に、選択した1の輪郭候補線分を結合輪郭線と算出する。
次に、検出部40は、算出した結合輪郭線に対して、座標変換処理における変換の逆変換を行い、逆変換線を算出する。
図12は、検出部40によって算出された逆変換線の一例である。図12において、逆変換線は、座標変換処理が実行される前の第2輪郭強調画像(図5参照)に重ね合わせられた状態で図示されている。図12において、点の集合からなる閉曲線が、逆変換線を示す。
検出部40は、逆変換線に対して凸包処理を行って、爪の輪郭を算出する。逆変換線に対して凸包処理を行う理由は、一般に、爪は凹状にえぐれておらず凸形状であるため、逆変換線の凹部は、爪の輪郭ではなく、例えば、爪に当たった光が反射してできた爪のテカリ等に起因するものであると推定されるためである。
図13は、凹部が存在する逆変換線に取り囲まれた領域の一例を示す模式図である。
図14は、凸包処理後の逆変換線に取り囲まれた領域の一例を示す模式図である。
図15は、検出部40によって算出された爪の輪郭の一例である。図15において、爪の輪郭は、取得部10によって取得された指先画像(図2参照)に重ね合わせられた状態で図示されている。
検出部40は、爪の輪郭を算出すると、爪の輪郭で取り囲まれた領域を、爪の領域と検出する。そして、検出部40は、検出した爪の領域を特定する信号を出力する。
[動作]
以下、上記構成の領域検出装置1の行う動作について、図面を用いて説明する。
領域検出装置1は、爪を含む指先の指先画像を取得し、取得した指先画像から爪の領域を検出する第1爪領域検出処理を行う。
図16は、第1爪領域検出処理のフローチャートである。
第1爪領域検出処理は、例えば、領域検出装置1に対して、第1爪領域検出処理を開始する旨の操作がなされることで開始される。
第1爪領域検出処理が開始されると、取得部10は、爪を含む指先の指先画像を取得する(ステップS10)。
指先画像が取得されると、特定部20は、爪の内側の一の点を特定する(ステップS15)。この際、特定部20は、指先画像から指先の輪郭を抽出し、抽出した指先の輪郭に外接する長方形を算出し、算出した長方形の中心を、一の点として特定する。一方、変換部30は、指先画像に対して、輪郭強調処理とマスク処理とを行い、指先画像を、第2輪郭強調画像へと加工する(ステップS20)。
次に、変換部30は、第2輪郭強調画像に対して、特定された一の点を極とする座標変換処理を行い、第2輪郭強調画像を極座標画像へと変換する(ステップS25)。
極座標画像へと変換されると、検出部40は、極座標画像から、複数の輪郭候補画素を抽出する(ステップS30)。そして、検出部40は、抽出した複数の輪郭候補画素のうち、極座標画像における距離方向を除く方向において列状に隣接する輪郭候補画素群からなる1以上の輪郭候補線分を抽出する(ステップS35)。
一以上の輪郭候補線分が抽出されると、検出部40は、各輪郭候補線分に重み付けをして(ステップS40)、極座標画像における距離方向に重ならない1以上の輪郭候補線分を選択し(ステップS45)、選択した各輪郭候補線分を結合して結合輪郭線を算出する(ステップS50)。
結合輪郭線が算出されると、検出部40は、算出した結合輪郭線に対して、座標変換処理における変換の逆変換を行い、逆変換線を算出する(ステップS55)。
逆変換線が算出されると、検出部40は、逆変換線に対して凸包処理を行って(ステップS65)、爪の輪郭を算出する(ステップS70)。
爪の輪郭が算出されると、検出部40は、爪の輪郭で取り囲まれた領域を、爪の領域と検出する(ステップS75)。
ステップS75の処理が終了すると、領域検出装置1は、その第1爪領域検出処理を終了する。
[考察]
以上説明した通り、上記構成の領域検出装置1は、上記第1爪領域検出処理を行うことで、指先画像を、爪の内側の一の点を極とする極座標画像に変換し、変換した極座標画像を用いて爪の領域を検出する。一般に、爪の輪郭は、閉構造であるため、爪の内側の一の点を極とする極座標画像において、爪の輪郭は、角度方向に伸びる線分として現れる。このため、領域検出装置1は、比較的簡易かつ比較的的確に爪の領域を検出することができる。
(実施の形態2)
以下、実施の形態1に係る領域検出装置1から、その構成の一部が変更された実施の形態2に係る領域検出装置について説明する。
[構成]
図17は、実施の形態2に係る領域検出装置1Aの構成を示すブロック図である。以下では、領域検出装置1Aについて、領域検出装置1と同様の構成要素については、既に説明済みであるとして同じ符号を振ってその詳細な説明を省略し、領域検出装置1との相違点を中心に説明する。
図17に示されるように、領域検出装置1Aは、実施の形態1に係る領域検出装置1に対して、取得部10が取得部10Aに変更され、特定部20が特定部20Aに変更され、撮像部50が追加されている点で異なる。
撮像部50は、画像を撮像する。より具体的には、爪を含む指先の画像を撮像する。
図18は、撮像部50の斜視図である。
図18に示されるように、撮像部50は、撮像装置51と指先載置台52とを含んで構成される。
指先載置台52は、撮像対象となる指先を載置する台であって、指先を載置する状態において、その指先が、撮像装置51の画角内の所定の位置に収まるように指先を保持する。指先載置台52は、撮像対象となる指先が撮像装置51の画角内の所定の位置に収まるように指先を保持することができれば、例えば、図18に示されるように、載置される指先を、その先端及び左右から包む側壁を有する構造であってもよいし、他の構造であってもよい。
撮像装置51は、イメージセンサ、光学系等を含み、指先載置台52に載置された指先の画像を撮像する。撮像装置51は、指先載置台52に載置された指先が、画角内の所定の位置に収まるように、指先載置台52に固定されている。より具体的には、撮像装置51は、撮像する画像の中心点が、撮像対象となる指先の爪の内側に位置するように、指先載置台52に固定されている。これにより、撮像装置51によって撮像された指先画像は、その中心点が撮像対象となる指先の爪の内側に位置する画像となる。
取得部10Aは、撮像部50により撮像された画像を、爪を含む指先の指先画像として取得する。
特定部20Aは、取得部10Aによって取得された指先画像から、爪の内側の一の点を特定する。より具体的には、特定部20Aは、その指先画像の中心点を、一の点として特定する。
[動作]
以下、上記構成の領域検出装置1Aの行う動作について、図面を用いて説明する。
領域検出装置1Aは、実施の形態1に係る第1爪領域検出処理から、その処理の一部が変更された第2爪領域検出処理を行う。
図19は、第2爪領域検出処理のフローチャートである。
第2爪領域検出処理において、ステップS120の処理~ステップS175の処理は、それぞれ、実施の形態1に係る第1爪領域検出処理における、ステップS20の処理~ステップS75の処理と同様の処理である。このため、以下では、ステップS120の処理~ステップS175の処理は、既に説明済みであるとしてそれらの詳細な説明を省略し、ステップS105の処理~ステップS115の処理を中心に説明する。
第2爪領域検出処理は、例えば、指先載置台52に指先が載置された状態において、領域検出装置1Aに対して、第2爪領域検出処理を開始する旨の操作がなされることで開始される。
第2爪領域検出処理が開始されると、撮像部50は、指先載置台52に載置された指先を撮像対象として、爪を含む指先の画像を撮像する(ステップS105)。
爪を含む指先の画像が撮像されると、取得部10Aは、撮像部50から、その画像を指先画像として取得する(ステップS110)。
指先画像が取得されると、特定部20Aは、爪の内側の一の点を特定する(ステップS115)。この際、特定部20Aは、指先画像の中心点を、一の点として特定する。
ステップS115の処理が終了すると、領域検出装置1Aは、ステップS120の処理に進む。そして、ステップS175の処理が終了すると、領域検出装置1Aは、その第2爪領域検出処理を終了する。
[考察]
以上説明した通り、上記構成の領域検出装置1Aは、実施の形態1に係る領域検出装置1と同様に、比較的簡易かつ比較的的確に爪の領域を検出することができる。
(実施の形態3)
以下、実施の形態1に係る領域検出装置1から、その構成の一部が変更された実施の形態3に係る領域検出装置について説明する。
[構成]
図20は、実施の形態3に係る領域検出装置1Bの構成を示すブロック図である。以下では、領域検出装置1Bについて、領域検出装置1と同様の構成要素については、既に説明済みであるとして同じ符号を振ってその詳細な説明を省略し、領域検出装置1との相違点を中心に説明する。
図20に示されるように、領域検出装置1Bは、実施の形態1に係る領域検出装置1に対して、検出部40が検出部40Bに変更されている点で異なる。
検出部40Bは、実施の形態1に係る検出部40から、輪郭候補線分の択一的な選択方法を行う際の選択方法が変更されて構成される。検出部40Bは、指先画像における爪の輪郭が、一般に爪の縦方向の中心線を対象軸として略線対称であることを利用して、輪郭候補線分の択一的な選択を行う。より具体的には、検出部40Bは、輪郭候補線分の択一的な選択において、選択対象とする複数の輪郭候補線分のうち、指先画像において爪の縦方向の中心線を対象軸とする線対称の場所に位置する輪郭候補線分に最も類似している輪郭候補線分を選択する。
[動作]
以下、上記構成の領域検出装置1Bの行う動作について、図面を用いて説明する。
領域検出装置1Bは、実施の形態1に係る第1爪領域検出処理から、その処理の一部が変更された第3爪領域検出処理を行う。
図21は、第3爪領域検出処理のフローチャートである。
第3爪領域検出処理において、ステップS210の処理~ステップS235の処理、及び、ステップS245の処理~ステップS275の処理は、それぞれ、実施の形態1に係る第1爪領域検出処理における、ステップS10の処理~ステップS35の処理、及び、ステップS45の処理~ステップS75の処理と同様の処理である。このため、以下では、ステップS210の処理~ステップS235の処理、及び、ステップS245の処理~ステップS275の処理は、既に説明済みであるとしてそれらの詳細な説明を省略し、ステップS245の処理を中心に説明する。
ステップS235の処理において、1以上の輪郭候補線分が抽出されると、検出部40は、選択対象とする輪郭候補線分のうち、指先画像において爪の縦方向の中心線を対象軸とする線対称の場所に位置する輪郭候補線分に最も類似している輪郭候補線分を選択するように、極座標画像における距離方向に重ならない1以上の輪郭候補線分を選択する(ステップS245)。
ステップS245の処理が終了すると、領域検出装置1Bは、ステップS250の処理に進む。そして、ステップS275の処理が終了すると、領域検出装置1Bは、その第3爪領域検出処理を終了する。
[考察]
以上説明した通り、上記構成の領域検出装置1Bは、実施の形態1に係る領域検出装置1と同様に、比較的簡易かつ比較的的確に爪の領域を検出することができる。
(実施の形態4)
以下、実施の形態1に係る領域検出装置1から、その構成の一部が変更された実施の形態4に係る領域検出装置について説明する。
[構成]
図22は、実施の形態4に係る領域検出装置1Cの構成を示すブロック図である。以下では、領域検出装置1Cについて、領域検出装置1と同様の構成要素については、既に説明済みであるとして同じ符号を振ってその詳細な説明を省略し、領域検出装置1との相違点を中心に説明する。
図22に示されるように、領域検出装置1Cは、実施の形態1に係る領域検出装置1に対して、変換部30が変換部30Cに変更されている点で異なる。
変換部30Cは、実施の形態1に係る変換部30から、極座標画像を算出する算出工程が変更されて構成される。より具体的には、変換部30Cは、指先画像に対して、先に座標変換処理を行って極座変換された指先画像を算出し、算出した極座標変換された指先画像に対して輪郭強調処理を行って、極座標画像に加工する。
変換部30Cは、上記構成により、輪郭強調処理における輪郭の強調を、極座標変換された指先画像における角度方向に限定することができるようになる。
[動作]
以下、上記構成の領域検出装置1Cの行う動作について、図面を用いて説明する。
領域検出装置1Cは、実施の形態1に係る第1爪領域検出処理から、その処理の一部が変更された第4爪領域検出処理を行う。
図23は、第4爪領域検出処理のフローチャートである。
第4爪領域検出処理において、ステップS310の処理~ステップS315の処理、及び、ステップS330の処理~ステップS375の処理は、それぞれ、実施の形態1に係る第1爪領域検出処理における、ステップS10の処理~ステップS15の処理、及び、ステップS30の処理~ステップS75の処理と同様の処理である。このため、ステップS310の処理~ステップS315の処理、及び、ステップS330の処理~ステップS375の処理は、既に説明済みであるとしてそれらの詳細な説明を省略し、ステップS320の処理~ステップS325の処理を中心に説明する。
ステップS315の処理において、爪の内側の一の点が特定されると、変換部30Cは、指先画像に対して、特定された一の点を極とする極座標変換処理を行い、極座標変換された指先画像を算出する(ステップS320)。
極座標変換された指先画像が算出されると、変換部30Cは、極座標変換された指先画像に対して輪郭強調処理を行って、極座標画像に加工する(ステップS330)。
ステップS325の処理が終了すると、領域検出装置1Cは、ステップS330の処理に進む。そして、ステップS375の処理が終了すると、領域検出装置1Cは、その第4爪領域検出処理を終了する。
[考察]
以上説明した通り、上記構成の領域検出装置1Cは、実施の形態1に係る領域検出装置1と同様に、比較的簡易かつ比較的的確に爪の領域を検出することができる。
(補足)
以上、本発明に係る入力装置について、実施の形態1~実施の形態4に基づいて説明したが、本発明は、これら実施の形態及び変形例に限定されるものではない。本発明の趣旨を逸脱しない限り、当業者が思いつく各種変形をこれら実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構成される形態も、本発明の態様の範囲内に含まれてもよい。
本発明は、領域を検出する装置に広く利用可能である。
1、1A、1B、1C 領域検出装置
10、10A 取得部
20、20A 特定部
30、30C 変換部
40、40B 検出部
50 撮像部
51 撮像装置
52 指先載置台

Claims (10)

  1. 爪を含む指先の指先画像を取得する取得部と、
    前記指先画像を、前記指先画像における前記爪の内側の一の点を極とする極座標画像に変換する変換部と、
    前記極座標画像を用いて前記爪の領域を検出する検出部と、
    を備え
    前記検出部は、
    前記極座標画像における画素のうち、前記爪の輪郭に位置する画素の候補となる複数の輪郭候補画素を抽出し、
    前記複数の輪郭候補画素のうち、前記極座標画像における距離方向を除く方向において列状に隣接する輪郭候補画素群からなる1以上の輪郭候補線分を抽出し、
    抽出した前記1以上の輪郭候補線分に基づいて、前記爪の領域を検出する
    領域検出装置。
  2. 前記検出部は、前記1以上の輪郭候補線分の抽出において複数の輪郭候補線分を抽出した場合に、
    抽出した前記複数の輪郭候補線分の中から、前記極座標画像における距離方向において互いに重ならない1以上の輪郭候補線分を選択し、
    選択した前記1以上の輪郭候補線分に基づいて、前記爪の領域を検出する
    請求項に記載の領域検出装置。
  3. 前記検出部は、前記1以上の輪郭候補線分の選択において、択一的な選択の対象となる複数の輪郭候補線分が存在する場合に、前記択一的な選択の対象となる複数の輪郭候補線分のそれぞれに対して、より長い輪郭候補線分の方が、より重みが重くなるように重み付けをして、前記択一的な選択を行う
    請求項に記載の領域検出装置。
  4. 前記検出部は、前記1以上の輪郭候補線分の選択において、択一的な選択の対象となる複数の輪郭候補線分が存在する場合に、前記択一的な選択の対象となる複数の輪郭候補線分のそれぞれに対して、前記極からの距離がより短い輪郭候補線分の方が、より重みが重くなるように重み付けをして、前記択一的な選択を行う
    請求項に記載の領域検出装置。
  5. 前記検出部は、前記1以上の輪郭候補線分の選択において複数の輪郭候補線分を選択した場合に、
    選択した前記複数の輪郭候補線分を結合して結合輪郭線分を算出し、
    算出した結合輪郭線分に基づいて、前記爪の領域を検出する
    請求項2~4のいずれか1項に記載の領域検出装置。
  6. 前記検出部は、
    前記結合輪郭線分に対して、前記変換の逆変換を行い、
    逆変換した前記結合輪郭線分に基づいて、前記爪の領域を抽出する
    請求項に記載の領域検出装置。
  7. 前記検出部は、
    逆変換した前記結合輪郭線分に凹部が存在する場合に、当該結合輪郭線分に対して凸包処理を行って前記爪の輪郭を算出し、
    算出した前記爪の輪郭に基づいて、前記爪の領域を抽出する
    請求項に記載の領域検出装置。
  8. さらに、前記指先画像から、前記一の点を特定する特定部を備える
    請求項1~のいずれか1項に記載の領域検出装置。
  9. 前記特定部は、
    前記指先画像から、前記指先の輪郭を抽出し、
    抽出した前記指先の輪郭に外接する長方形を算出し、
    算出した前記長方形の中心を、前記一の点として特定する
    請求項に記載の領域検出装置。
  10. さらに、画像を撮像する撮像部を備え、
    前記取得部は、前記撮像部により撮像された画像を、前記指先画像として取得する
    請求項1~のいずれか1項に記載の領域検出装置。
JP2020557543A 2018-11-30 2019-05-09 領域検出装置 Active JP7347443B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201862773512P 2018-11-30 2018-11-30
US62/773,512 2018-11-30
PCT/JP2019/018647 WO2020110347A1 (ja) 2018-11-30 2019-05-09 領域検出装置

Publications (2)

Publication Number Publication Date
JPWO2020110347A1 JPWO2020110347A1 (ja) 2021-10-21
JP7347443B2 true JP7347443B2 (ja) 2023-09-20

Family

ID=70851955

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020557543A Active JP7347443B2 (ja) 2018-11-30 2019-05-09 領域検出装置

Country Status (5)

Country Link
US (1) US11270453B2 (ja)
EP (1) EP3889902A4 (ja)
JP (1) JP7347443B2 (ja)
CN (1) CN111989712A (ja)
WO (1) WO2020110347A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117197235A (zh) * 2023-08-24 2023-12-08 曲阜师范大学 一种基于极坐标的甲骨文定位方法
US12518385B1 (en) * 2025-02-27 2026-01-06 Belle Torus Corporation Compute system with nail ailment diagnostic mechanism and method of operation thereof

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012146182A (ja) 2011-01-13 2012-08-02 Kddi Corp 爪領域検出装置およびネイルアートシミュレータ
WO2014033842A1 (ja) 2012-08-28 2014-03-06 株式会社日立製作所 認証装置、及び認証方法
JP2017113176A (ja) 2015-12-22 2017-06-29 株式会社東芝 情報提供装置、情報提供方法、情報提供プログラム、付け爪、および付け爪の製造方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08194825A (ja) 1995-01-13 1996-07-30 Sumitomo Metal Ind Ltd 輪郭情報抽出装置
DE102004041115A1 (de) * 2004-08-24 2006-03-09 Tbs Holding Ag Verfahren und Anordnung zur Erfassung biometrischer Daten
CN101567086B (zh) * 2009-06-03 2014-01-08 北京中星微电子有限公司 一种车道线检测方法及其设备
JP5601103B2 (ja) * 2010-09-08 2014-10-08 カシオ計算機株式会社 ネイルプリント装置及び印刷制御方法
JP5969460B2 (ja) 2011-03-14 2016-08-17 聖 星野 爪領域検出方法、プログラム、記憶媒体、及び爪領域検出装置
JP2012203612A (ja) * 2011-03-25 2012-10-22 Juki Corp 画像処理方法及び画像処理装置
JP2014215735A (ja) * 2013-04-24 2014-11-17 国立大学法人筑波大学 爪画像合成装置、爪画像合成方法および爪画像合成プログラム
JP2015000873A (ja) * 2013-06-14 2015-01-05 東海興業株式会社 人工爪組成物
JP6268771B2 (ja) 2013-07-05 2018-01-31 カシオ計算機株式会社 ネイルプリント装置、ネイルプリント装置の印刷方法及びプログラム
JP6575060B2 (ja) * 2014-12-19 2019-09-18 カシオ計算機株式会社 描画装置、描画装置の動作制御方法及び描画装置の動作制御プログラム
GB2544971B (en) * 2015-11-27 2017-12-27 Holition Ltd Locating and tracking fingernails in images
JP2018055364A (ja) 2016-09-28 2018-04-05 カシオ計算機株式会社 サーバ装置、爪領域検出システム及び描画装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012146182A (ja) 2011-01-13 2012-08-02 Kddi Corp 爪領域検出装置およびネイルアートシミュレータ
WO2014033842A1 (ja) 2012-08-28 2014-03-06 株式会社日立製作所 認証装置、及び認証方法
JP2017113176A (ja) 2015-12-22 2017-06-29 株式会社東芝 情報提供装置、情報提供方法、情報提供プログラム、付け爪、および付け爪の製造方法

Also Published As

Publication number Publication date
EP3889902A4 (en) 2022-08-24
JPWO2020110347A1 (ja) 2021-10-21
US20210158559A1 (en) 2021-05-27
CN111989712A (zh) 2020-11-24
EP3889902A1 (en) 2021-10-06
WO2020110347A1 (ja) 2020-06-04
US11270453B2 (en) 2022-03-08

Similar Documents

Publication Publication Date Title
US10997465B2 (en) Information processing device, information processing method, and storage medium
JP4479194B2 (ja) 動作識別装置、及び対象物の姿勢識別装置
JP5801237B2 (ja) 部位推定装置、部位推定方法、および部位推定プログラム
JP2010165248A (ja) 画像処理装置、画像照合方法、および、プログラム
WO2012033109A1 (en) Method and apparatus for 3d-measurement by detecting a predetermined pattern
CN111198608A (zh) 信息提示方法、装置、终端设备及计算机可读取存储介质
US10572762B2 (en) Image processing method for performing pattern matching for detecting a position of a detection target
JP4792824B2 (ja) 動作分析装置
US9595095B2 (en) Robot system
JPWO2009088053A1 (ja) 測定装置および方法、並びに、プログラム
JP7347443B2 (ja) 領域検出装置
JP6646208B2 (ja) 表示制御方法、表示制御プログラムおよび情報処理装置
JP2010113530A (ja) 画像認識装置及びプログラム
JP2014215735A (ja) 爪画像合成装置、爪画像合成方法および爪画像合成プログラム
CN109753945B (zh) 目标主体识别方法、装置、存储介质和电子设备
JP5887264B2 (ja) 物体認識装置、方法、プログラム、および該ソフトウェアを格納したコンピュータ可読媒体
JP6874855B2 (ja) 算出方法、算出プログラムおよび情報処理装置
JP6165513B2 (ja) ハンドジェスチャトラッキングシステム
JP5953166B2 (ja) 画像処理装置及びプログラム
JP5708305B2 (ja) 画像認識装置、画像認識方法及び画像認識用コンピュータプログラム
JP2018092507A (ja) 画像処理装置、画像処理方法及びプログラム
JP3627249B2 (ja) 画像処理装置
JP2000180138A (ja) キャリブレーションプレート及びこれを利用する視覚センサのキャリブレーション装置
JP6676256B2 (ja) 画像処理装置及び画像処理方法
JP2013109692A (ja) 画像処理装置、画像処理方法及び画像処理プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220407

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230322

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230518

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20230616

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230808

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230821

R150 Certificate of patent or registration of utility model

Ref document number: 7347443

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150