JP2015009140A - 黄疸測定プログラム、及び、それを用いる黄疸測定システム - Google Patents

黄疸測定プログラム、及び、それを用いる黄疸測定システム Download PDF

Info

Publication number
JP2015009140A
JP2015009140A JP2013226968A JP2013226968A JP2015009140A JP 2015009140 A JP2015009140 A JP 2015009140A JP 2013226968 A JP2013226968 A JP 2013226968A JP 2013226968 A JP2013226968 A JP 2013226968A JP 2015009140 A JP2015009140 A JP 2015009140A
Authority
JP
Japan
Prior art keywords
color
jaundice
value
image
color chart
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013226968A
Other languages
English (en)
Other versions
JP6266948B2 (ja
Inventor
信旭 周
Xinxu Zhou
信旭 周
育寰 劉
Yuh-Hwan Liu
育寰 劉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Publication of JP2015009140A publication Critical patent/JP2015009140A/ja
Application granted granted Critical
Publication of JP6266948B2 publication Critical patent/JP6266948B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

【課題】 黄疸測定プログラム、及び、それを用いる黄疸測定システムを提供する。【解決手段】 電子機器を、画像取り込み手段、色校正手段、および黄疸指数計算手段として機能させる。画像取り込み手段は、新生児の顔及び色票の画像を取り込むステップS1を実行する。色校正手段は、取り込んだ画像に対し色票に合わせて色の校正を行うステップS2を実行する。黄疸指数計算手段は、画像の顔画素の色情報により黄疸指数を計算すると共に不良画像を排除するステップS3を実行する。【選択図】 図1

Description

本発明は、黄疸測定プログラム、及び、それを用いる黄疸測定システムに関する。
黄疸の測定は、新生児時期において最もよく実施される血液検査の一つであり、同時に医療関係者と両親が赤ちゃんの生まれた初期において密切に観察する重点でもある。黄疸値が高過ぎると、新生児が核黄疸(kernicterus)を発症し、脳の障害を起こすおそれがあり、重篤な場合、脳性麻痺、難聴、知的障害等の後遺症を残すおそれもある。
現在黄疸の測定方法は、主に採血又は足踵から少量の採血による検査に依存しているが、このステップは、侵襲性検査に属しているため痛み、出血、傷からの感染等の副作用を起こすおそれがあり、実施する上での制限や家族に不安を持たせていた。よって血液検査の大半は、家族又は医療関係者の肉眼的観察で赤ちゃんの肌に黄疸現象が現れたことを発見してから血液検査による確認が行われてきた。しかしながら黄疸を肉眼的に観察するは、主観的な判断で、特に新生児の両親は専門的な訓練を受けておらず、経験もないため、よく誤判定により赤ちゃんの黄疸治療の遅れ或いは不必要な過度の血液検査を受けてしまう。この外に、黄疸計(jaundice meter)は、ビームを赤ちゃんの皮膚に照射し、戻ってきた光の波長を分析して非侵襲性の黄疸判読数値を提供できるが、高価な黄疸計は、一般的な家庭で負担できるものでなく、且つ黄疸測定を必要とする大半の期間は赤ちゃんが生まれてから1〜2ヵ月以内だけで、この計器は幅広く世間に適用されているものではない。
特開2012−61232号公報
本発明の目的は、現在非常に普及し且つカメラ機能付きスマートフォン、タブレットコンピュータ或いはパソコンを通じて、画像処理(非侵襲性)方法で新生児の皮膚に対し測定を行うと共に客観的な黄疸指標を提供することで、新生児の両親に新生児黄疸の指標を随時自己測定させることが可能であり、黄疸の指標が正常値より高い時、再診警告メッセージを発すことが可能な黄疸測定プログラム、及び、それを用いる黄疸測定システムを提供することにある。
本発明による黄疸測定プログラムは、電子機器を、画像取り込み手段、色校正手段、および黄疸指数計算手段として機能させる。画像取り込み手段は、新生児の顔及び色票の画像を取り込むステップS1を実行する。色校正手段は、取り込んだ画像に対し色票に合わせて色の校正を行うステップS2を実行する。黄疸指数計算手段は、画像の顔画素の色情報により黄疸指数を計算すると共に不良画像を排除するステップS3を実行する。
前記新生児の顔及び色票の画像を取り込むステップS1は、スマートフォン、タブレットコンピュータ或いはパソコン等のカメラを備え、並びに本発明に係わる方法のアプリケーションプログラム(APP)を実行できるツールで撮影し、また前記色票は純赤色、純緑色、純青色という3色を有するものである。構図を決めるため、該撮影のプレビュー画面で顔の輪郭線及び推奨位置の色票輪郭線を設定し、また撮影前又は撮影後の撮影過程において新生児の生後時間をロードすることで、新生児の現時点の黄疸正常値範囲の判断に対応する。該色票は、長方形で新生児の顔の周囲位置を配列させることができ、画像分析に干渉しないように新生児の顔周り物、例えばおくるみ、布団或いは枕等の背景色が赤、緑、青、黄等の色を避ける。
前記取り込んだ画像に対し色票に合わせて色の校正を行うステップS2は、RGBカラーモデルを使用すると共に色票の色の平均値に基づき画像全体に対し色正規化を行うことである。該ステップS2には色票の位置を自動的に検索して色票領域の画素(pixel)総数Nxを計算し、x∈{r,g,b}とし、該Nxが設定値を上回った時更に色票の色平均値を計算するステップS21と、色票の色平均値に基いて画像全体に対し色正規化を行うステップS22とを更に含む。前記ステップS21では画像を取り込んだ後推奨位置の色票輪郭線内において純赤色、純緑色、純青色と非常に近い色領域を各々検索し、更にこれら領域の最大繋ぎ範囲を各々見つけ出して赤、緑、青の色票領域とする。
本発明で検索した後赤の色票がある領域の中における赤チャンネル(Red Channel)の平均値を赤の色票の取り込んだ画像における色Prと定義する。緑と青の色票の取り込んだ画像における色の処理方法も同じで、PgとPbを求めることができる。
また前記色票の色平均値に基いて画像全体に対し色正規化を行うステップS22は、画像内の各画素を赤、緑、青チャネルに対して調整し、異なる撮影環境で生じる画像の色差を低減できる。
前記画像の顔画素の色情報により黄疸指数を計算するステップS3は、HSV(Hue、Saturation、Value)カラーモデルで顔の肌色に属する領域を自動的に取得し、またこの領域で黄疸に属する領域を検索することである。黄疸領域の画素の飽和度(Saturation)平均値を計算し、ある特殊な関数変換を経て血液検査で得られた黄疸値に相当する黄疸指標とし、また黄疸領域の画素数と肌領域の画素数の比を取り込んだ画像品質の評価根拠とする。
ステップS3は、一般肌色の色相(Hue)範囲に基いて推奨する顔位置で肌に属する画素を検索すると共にその総数NSKを計算するステップS31と、これら肌の画素において更に黄疸値の色相範囲に基いて黄疸領域に属する画素を見つけ出すステップS32と、これら黄疸領域画素の飽和度平均値と黄疸領域画素数及び肌領域画素数の比(Jaundice SKin Ratio、JSR)を計算するステップS33と、飽和度平均値を黄疸指標に変換するステップS34と、を含む。
ステップS31は、発明者が統計した新生児の顔の肌領域の色相(Hue)範囲を指定された顔の画素パラメータとすることを通じて、取り込んだ画像内楕円形の顔の輪郭線範囲内においてこの画像の顔の肌領域画素を選別すると共にその総数がNSKであることを計算する。また取り込む画像の品質及び精度を向上するため、ステップS31の後に輪郭線内の画素総数NE及びその飽和度平均値SEを計算と検索し、またNSKとNEの比(SKin Ellipse Ratio,SER)を計算するステップS311に進むことができる。当該SE及びSER値が設定値を上回った時更にステップS32に進むことができる。
前記ステップS32は、発明者が統計した新生児黄疸領域の色相範囲を設定された黄疸の画素パラメータとすることを通じて、取り込んだ顔範囲の画素において更にこの画像の黄疸領域画素を選別する。
前記ステップS33は、黄疸領域画素総数と顔の肌領域画素総数の比を求める。画像の品質不良による誤判定を避けるため、黄疸領域画素総数或いは両者の比のいずれか又は顔の輪郭線範囲内画素の飽和度平均値が設定値を下回った時改めて画像を取り込み直すよう推奨する。
また前記ステップS34は、黄疸領域の画素の色飽和度平均値を計算してからこれを黄疸指数に変換し、求めて得られた黄疸指数を血液検査で得られた黄疸値に相当させ、黄疸指数が一般的な中リスクより高い時、警告を発すと共に再診を勧めるようする。
本発明の方法は、コンピュータプログラム(APP)製品とすることができる。該コンピュータプログラム(APP)はインターネットからダウンロード若しくはその他のルートを通じて現在非常に普及しているカメラ機能付きスマートフォン、タブレットコンピュータ、パソコン又はこれらに類する電子機器等にロードすると、本発明の方法を実施できる。本発明の操作時色票に合わせて撮影でき且つオンラインでリアルタイム分析できるため、操作利便性の効果を持つことができる。また本発明は、取り込んだ画像の品質が要求(例えば、光が暗すぎ或いは顔と色票位置が理想的ではない)を満たさない場合、改めて撮影し直すよう求めるため、より一層正確な測定結果を提供でき、且つ本発明の撮影方法の測定変換指数が血液検査の黄疸値に相当し、目測方法より正確になり、また新生児への肉眼的な判断ミスによる治療タイミングを逃がすことがなくなる。よって、新生児の両親の心配を軽減し、過度の血液検査を減らし、黄疸値が高すぎてもで家族が発見できなかったという無念を避けることができ、且つ医療資源も節減することができることである。
本発明の一実施形態による黄疸測定プログラムの処理ステップを示す模式図である。 本発明の一実施形態による黄疸測定プログラムのフローチャートである。 本発明の一実施形態による黄疸測定プログラムによる処理過程を示す模式図である。 本発明の一実施形態による黄疸測定プログラムによる処理結果を示す特性図である。 米国小児科学会から公表された新生児の生後黄疸曲線図である。
(一実施形態)
図1乃至図3を参照しながら説明する。
図1は本発明の一実施形態による黄疸測定プログラムの処理ステップを示す図で、図2はフローチャートで、図3が本実施形態の撮影画像を色票に組み合わせた様子を示す図である。本実施形態では、新生児の顔及び色票の画像を取り込むS1と、取り込んだ画像に対し色票に合わせて色の校正を行うS2と、画像の顔画素の色情報により黄疸指数を計算すると共に不良画像を排除するS3と、を含む。
前記新生児の顔及び色票の画像を取り込むステップS1は、スマートフォン、タブレットコンピュータ或いはパソコン等のカメラ又はこれに類する機能を備える電気機器及びプログラムを実行できるツールで撮影する。また前記色票は純赤色、純緑色、純青色という3色を有するカラーチェッカ形態の色票11、12、13で、各色票11、12、13寸法がいずれも1cm2を上回る。図3に示す構図を決めるため、該撮影のプレビュー画面で楕円形の顔の輪郭線2及び両長方形色票推奨位置の色票輪郭線3を設定し、また本実施例の各純赤色、純緑色、純青色の色票11、12、13が上方の色票輪郭線3内に配列され、撮影前又は撮影後の撮影過程において新生児の生後時間データをロードすることで、本実施形態が図5に示す新生児の現時点の黄疸正常値範囲の判断に対応させる。画像分析に干渉しないように新生児の顔の周りの物、例えばおくるみ、布団或いは枕等の背景色が赤、緑、青、黄等の色を避ける。
前記取り込んだ画像に対し色票に合わせて色の校正を行うステップS2は、RGBカラーモデルを使用すると共に色票の色の平均値に基づき画像全体に対し色正規化を行うことである。該S2ステップには色票の位置を自動的に検索して色票領域の画素(pixel)総数Nxを計算し、x∈{r,g,b}とし、該Nxが設定値を上回った時更に色票の色平均値を計算するステップS21と、色票の色平均値に基いて画像全体に対し色正規化を行うステップS22とを更に含む。前記ステップS21では画像を取り込んだ後両長方形色票推奨位置の色票輪郭線3内において純赤色、純緑色、純青色と非常に近い色領域を各々検索し、更にこれら領域の最大繋ぎ範囲を各々見つけ出して赤、緑、青の色票11、12、13領域とする。
本実施形態の色票位置を自動的に検索することは、mxRri、mxRgi、mxRbiを各々Rri、Rgi、Rbi内の最大連続領域にさせ、maxi{mxRri、mxRgi、mxRbi}はi番目領域において同時に最大のmxRri、mxRgi、mxRbiを備え、これら領域が純赤色、純緑色、純青色色票11、12、13がある領域である。本実施例は、顔の上方位置にある色票輪郭線3に色票11、12、13の位置を検索できる。またmxRri、mxRgi、mxRbiの個別領域の画素数がNxで、x∈{r,g,b}とし、Nxが設定値thNxを下回った時、色票が正確に色票輪郭線3の中に置かず、或いは画像の取り込み時光線の不足を示し、且つ該Nx値がカメラ解像度の設定に対応し、解像度が高い時Nx値が高くなる。例えば解像度は4752x3168の時thNx値が10000で、10000より低い場合色票位置を調整してから改めて画像を取り込むよう推奨する。
また{CPi}は長方形の色票推奨位置の色票輪郭線3内の画素(pixel)集合として設定し、i∈{0,1}とし、iが固定領域に属さない。Rri、Rgi、Rbiは各々i番目の長方形内の純赤色、純緑色、純青色と非常に近い色領域とさせる。
本実施形態では、色票の色のデフォルト閾値をth_cpとする。th_cpは、下記数式1を満たす。好ましいth_cpを10に設定する。
Figure 2015009140
(数式1において、x∈{r,g,b}、(rr、rg、rb)=(255、0、0)、(gr、gg、gb)=(0、255、0)、(br、bg、bb)=(0、0、255)である。)
aとb間の距離は下記の数式2で算出する。
Figure 2015009140
本実施形態で検索した後赤の色票11がある領域の中における赤チャンネル(Red Channel)の平均値を赤の色票11の取り込んだ画像における色Prと定義する。緑と青の色票の取り込んだ画像における色の処理方法も同じで、PgとPを求めることができる。
本実施例は、2つの長方形色票輪郭線3を利用者に配列しやすい色票として設定しているが、本実施形態は1つの色票輪郭線3のみとしても設定できる。画像を取り込む時、ある不可抗力の要因により、色票を色票輪郭線3の中に置けない場合、まず自由に顔以外で且つ画像取り込み範囲内のその他領域を置き、画像を取り込んでから手動で色票位置を設定する手順を実行でき、つまり利用者は手動で色票範囲の中心点をクリックすると、本実施形態が自動的に該位置付近の色票を検索できる。その色票の検索方法は前記ステップと同じである。
次に、前記色票の色平均値により画像全体に対し色正規化を行うステップS22は、画像内の各画素を各々赤・緑・青チャンネルに対し調整し、赤の色票11がある領域の赤チャンネル値を255に近づけさせる。緑と青の色票12、13の処理方法も同じとする。fr=255/Pr、fg=255/Pg、fb=255/Pbとする場合、画像内の各画素の赤チャンネルCrをC´r=fr×Crに調整し、各画素の緑チャンネルCg及び青チャンネルCbの処理方法も同じで、C´g=fg×Cg、C´b=fb×Cbとし、また本実施形態のC´r、C´g、C´b RGB色情報を取得し、対応する色票11、12、13により画像内の各画素の画素値を計算し、且つ異なる撮影環境による画像の色差を低減できる。
本実施形態の色飽和度平均値のビリルビン値に対応する回帰統計図の図4を参照しながら説明する。前記画像の顔画素の色情報により黄疸指数を計算するステップS3は、HSV(Hue、Saturation、Value)カラーモデルで顔の肌色に属する領域を自動的に取得し、またこの領域で黄疸に属する領域を検索することである。黄疸領域の画素の飽和度(Saturation)平均値を計算し、ある特殊な関数変換を経て血液検査で得られた黄疸値に相当する黄疸指標とし、また黄疸領域の画素数と肌領域の画素数の比(Jaundice Skin Ratio, JSR)を取り込んだ画像品質の評価根拠とする。JSR値がthJSRを下回った場合、取り込んだ画像の品質が悪く、計算する黄疸指標に比較的大きな誤差が生じる。thJSRは、本実施形態の統計を経た後で得られたデフォルト閾値(Threshold)である。
ステップS3は、一般肌色の色相(Hue)範囲に基いて推奨する顔位置で肌に属する画素(pixel)を検索すると共にその総数NSKを計算するステップS31と、これら肌の画素において更に黄疸値の色相範囲に基いて黄疸領域に属する画素を見つけ出すステップS32と、これら黄疸領域画素の飽和度(Saturation)平均値と黄疸領域画素数及び肌領域画素数の比(Jaundice SKin Ratio、JSR)を計算するステップS33と、飽和度平均値を黄疸指標に変換するステップS34と、を含む。
下記の数式3により、該C´r、C´g、C´b (RGB)を(HSV)に変換する。
Figure 2015009140
該変換式は、従来の技術であるため、記述を省略する。該ステップS31は、RGB色情報によりHSV色情報に変換した後、発明者が統計した新生児の顔の肌領域の色相(Hue)範囲(本実施例では約42.5±18.5)を設定された顔の画素パラメータとすることを通じて、取り込んだ画像内楕円形の顔の輪郭線2範囲内においてこの画像の顔の肌領域画素集合SKを選別する。
また前記ステップS31において、画像を取り込む時不可抗力の外力により、顔の肌領域が楕円形の顔の輪郭線2範囲内に入らせることができた場合、本実施形態で画像を取り込んだ後、手動で楕円形の顔の輪郭線2位置、サイズ及び角度を調整することで、取り込んだ画像の顔の肌領域を楕円形の顔の輪郭線2範囲内にカバーされる。
更に取り込む画像の品質及び精度を高めるため、本実施形態はステップS31の後に輪郭線内の画素総数NE及びその飽和度平均値SEを計算と検索し、またNSKとNEの比SERを計算するステップS311を更に含むことができる。該顔の肌領域の画素集合SKの総数NSKと楕円形の顔の輪郭線2範囲内の画素集合Eの総数NEの比SER=NSK/NEで、SER値がthSER値を下回ると、取り込んだ画像の品質不良であると認定し、改めて画像を取り込み直すよう推奨する設定となっている。画像を取り込む時顔の肌領域と楕円形の顔の輪郭線2位置との差が大きい過ぎるかどうかを自動認識するため、本実施例はSER値がthSER(70%)を下回った時取り込んだ画像の品質不良であると認定し、改めて画像を取り込み直すよう推奨する設定となっている。また楕円形の顔の輪郭線2範囲内の全ての画素の飽和度平均値がSEで、本実施例はSE値がthSE(0.5)を下回った時画像を取り込んだ時の環境光の不足と認定し、改めて画像を取り込み直すよう推奨する設定となっている。前記ステップS32は、発明者が統計した新生児黄疸領域の色相範囲(本実施例では約40〜60)を設定された黄疸の画素パラメータとすることを通じて、取り込んだ顔範囲の画素において更にこの画像の黄疸領域画素集合Jを選別する。
前記ステップS33は、黄疸領域画素集合Jの総数NJと顔の肌領域画素集合SKの総数NSKの比JSR=NJ/NSKを求める。画像の品質不良による誤判定を避けるため、本実施例は、JSR値がthJSR (50%)を下回った時取り込んだ画像の品質不良と認定し、算出した後記JSに比較的大きな誤差があるため、改めて画像を取り込み直すよう推奨する設定となっている。
また前記ステップS34は、画素集合Jの色飽和度(Saturation)平均値JSを計算し、ある特殊な関数T(x)でこれを黄疸指数に変換し、求めて得られた黄疸指数を血液検査で得られた黄疸値JVに相当させる。図4に示すように、関数T(x)はJSとJVの回帰統計関数で、且つ該JSとJVが比例関係とし、JSが高いほどJVも高くなる。図5の米国小児科学会が公表した新生児の生後時間に対応する黄疸曲線図と一緒に参照し、該JV値と新生児の生後年齢(postnatal age)でその黄疸指数が高いすぎるかを判断し、黄疸指数は米国小児科学会が推奨する一般的な中リスク(例えば中央曲線以上)を上回り或いは15mg/dLより大きいか等しい時警告を発すと共に再診を勧める。
本実施形態は、コンピュータプログラム(APP)製品とすることができる。該コンピュータプログラム(APP)はインターネットから現在非常に普及しているカメラ機能付きスマートフォン、タブレットコンピュータ、パソコン又はこれらに類する電子機器等にロードすると、本実施形態の方法を実施できる。
本実施形態の操作時色票に合わせて撮影でき且つリアルタイム分析でき、特殊スペクトルの範囲の光を用いる必要がない、或いは特殊環境のもとで画像を撮影する必要がないため、操作利便性の効果を持つことができる。また新生児の両親にいつでも撮影測定を提供することでその心配を低減でき、同時に病院での血液検査を頻繁的に行う不便を避けることができる。
本発明は、取り込んだ画像の品質が要求(例えば、光が暗すぎ或いは顔と色票位置が理想的ではない)を満たさない場合、改めて撮影し直すよう求めるため、より一層正確な測定結果を提供でき、且つ本発明の撮影方法の測定変換指数が血液検査の黄疸値に相当し、新生児の両親の目測方法より正確になり、且つ黄疸指標が正常値より高い時再診警告メッセージを発すことで新生児は新生児両親の肉眼的な判断ミスによる治療タイミングを逃がすことがなくなる。前記実施例は、あくまでも本発明の技術内容を明らかにするものであって、この例によって何ら制限されるものではない。本発明の範囲内において種々の改良変更をなし得ることは、本発明の範囲内に含めるものであるのが勿論である。
11・・・赤の色票、
12・・・緑の色票、
13・・・青の色票、
2・・・顔の輪郭線、
3・・・色票の輪郭線。

Claims (10)

  1. 電子機器を、
    新生児の顔、及び、色票の画像を取り込むステップS1を実行する画像取り込み手段、
    取り込んだ画像に対し色票に合わせて色の校正を行うステップS2を実行する色校正手段、および、
    画像の顔画素の色情報に基づいて黄疸指数を計算すると共に不良画像を排除するステップS3を実行する黄疸指数計算手段、として機能させることを特徴とする黄疸測定プログラム。
  2. 前記ステップS1では、スマートフォン、タブレットコンピュータ、または、パソコンに設けられているカメラを含む前記画像取り込み手段、および、プログラムにより撮影を行い、
    色票は、純赤色、純緑色、および純青色を含むカラーチェッカであり、
    前記ステップS2は、前記色校正手段により実行され、色票の位置を自動的に検出し、色票領域の画素総数Nxを計算し、x∈{r,g,b}であり、画素総数Nxが所定値を上回った時、色票の色平均値を計算するステップS21と、色票の色平均値に基いて画像全体に対して色正規化を行いRGBの色情報を得るステップS22とを含み、
    前記ステップS3は、前記黄疸指数計算手段により実行され、正常の肌色の色相範囲に基いて推奨する顔の位置で肌に属する画素を検索し、画素総数NSKを計算するステップS31と、肌の画素において所定値の色相範囲に基いて所定領域に属する画素を検出するステップS32と、所定領域に属する画素の飽和度平均値、および、所定領域の画素数と肌領域の画素数との比SKを計算し、当該比の値が所定値を下回った時、改めて画像を取り込み直すステップS33と、飽和度平均値を黄疸指数に変換するステップS34とを有し、
    撮影過程において新生児の生後時間をロードすることで、新生児の顔色が異常であるか否かを判断することを特徴とする請求項1に記載の黄疸測定プログラム。
  3. 新生児の顔の周りの物が赤、緑、青、および黄の色を避けることを特徴とする請求項2に記載の黄疸測定プログラム。
  4. 撮影のプレビュー画面で顔の輪郭線、及び、少なくとも1つの色票輪郭線を設定し、
    前記ステップS21は、色票の位置を自動的に検索すると共に色票の輪郭線に色票を設置し、iが固定領域に属さないと設定し、
    mxRri、mxRgi、mxRbiが各Rri、Rgi、Rbi内の最大連続領域となるよう色票を検索し、
    maxi{mxRri、mxRgi、mxRbi}は、i番目領域において同時に最大のmxRri、mxRgi、mxRbiを有し、色票が位置する領域が純赤色、純緑色、純青色の色票が位置する領域であり、
    {CPi}は、色票輪郭線内の画素集合であり、
    Rri、Rgi、Rbiを色票輪郭線内の純赤色、純緑色、純青色と非常に近い色領域とし、
    th_cpは、色票の色のデフォルト閾値であり、下記の数式1を満たし、
    Figure 2015009140
    (数式1において、x∈{r,g,b}、(rr、rg、rb)=(255、0、0)、(gr、gg、gb)=(0、255、0)、(br、bg、bb)=(0、0、255)である)
    aとb間の距離を数式2で算出し、
    Figure 2015009140
    赤の色票がある領域の中における赤チャンネルの平均値を取り込んだ画像における赤の色票Prと定義し、緑と青の色票の取り込んだ画像における色の処理方法も同じであり、PgとPbを求めることが可能であり、
    前記ステップS22は、画像内の各画素を赤・緑・青チャンネルに対して調整を行い、赤の色票がある領域の赤チャンネル値を255に接近させ、緑と青の色票の処理方法も同じであり、
    r=255/Pr、fg=255/Pg、fb=255/Pbである場合、画像内の各画素の赤チャンネルCrをC´r=fr×Crと調整し、各画素の緑チャンネルCg及び青チャンネルCbをC´g=fg×CgおよびC´b=fb×Cbと調整し、C´r、C´g、C´bのRGB色情報を取得することを特徴とする請求項2に記載の黄疸測定プログラム。
  5. 前記Nx値はカメラの解像度に対応するよう設定されており、
    色票の好ましい色閾値が10であることを特徴とする請求項4に記載の黄疸測定プログラム。
  6. 前記ステップS31は、RGB色情報によりHSV色情報に変換した後、設定された顔の画素パラメータの色相範囲に基いて、取り込んだ画像内の顔の輪郭線範囲E内において、画像の顔の肌領域画素集合SKを選別すると共にその総数NSKを計算し、前記ステップS32で設定された黄疸領域の画素パラメータに基いて顔範囲の画素の中で画像の黄疸領域画素集合Jをさらに選別し、
    前記ステップS33が黄疸領域画素集合Jの総数NJとNSKの比JSR=NJ/NSKを求め、JSR値が設定値 thJSRを下回った時取り込んだ画像の品質不良と設定し、改めて画像を取り込み直すよう推奨し、
    前記ステップS34が画素集合Jの色飽和度平均値Jsを計算してから関数T(x)で黄疸指数に変換し、得られた黄疸指数を血液検査で得られた黄疸値Jvにすることを特徴とする請求項4に記載の黄疸測定プログラム。
  7. ステップS31の後に輪郭線内の画素総数NE及びその飽和度平均値SEを計算および検索し、また、NSKとNEの比SERを計算するステップS311を更に含み、
    前記ステップS311は、顔の肌領域の画素集合SKの総数NSKと顔の輪郭線範囲内の画素集合Eの総数NEの比SER=NSK/NEを算出し、SER値がthSER値を下回ると、取り込んだ画像の品質不良であると判断し、改めて画像を取り込み直すよう推奨し、また、SER値がthSER値を下回った時取り込んだ画像の品質不良であると設定し、改めて画像を取り込み直すよう推奨し、且つ、Eの飽和度平均値SEを求めて、SE値がthSE値を下回った時、画像を取り込んだ時の環境光の不足と判断し、改めて画像を取り込み直すよう推奨し、SER値がthSER値を上回り、及びSE値がthSE値を上回った場合ステップS32に進むことを特徴とする請求項6に記載の黄疸測定プログラム。
  8. 前記顔の画素パラメータは42.5±18.5であり、
    前記thSER値が70%であり、
    前記thSE値が0.5であり、
    前記黄疸の画素パラメータが40〜60であり、
    前記thJSR値が50%であり、
    前記関数T(x)がJsとJvの回帰統計関数であることを特徴とする請求項7に記載の黄疸測定プログラム。
  9. 撮影過程において新生児の生後時間をロードすることで、新生児の黄疸正常値範囲の判断に対応することを特徴とする請求項1に記載の黄疸測定プログラム。
  10. 請求項1から9のいずれか一項に記載の黄疸測定プログラムがインストールされている電子機器を備える黄疸測定システム。
JP2013226968A 2013-06-28 2013-10-31 黄疸測定システム Expired - Fee Related JP6266948B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW102123300 2013-06-28
TW102123300A TWI501186B (zh) 2013-06-28 2013-06-28 Automatic analysis of jaundice detection methods and computer program products

Publications (2)

Publication Number Publication Date
JP2015009140A true JP2015009140A (ja) 2015-01-19
JP6266948B2 JP6266948B2 (ja) 2018-01-24

Family

ID=52302855

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013226968A Expired - Fee Related JP6266948B2 (ja) 2013-06-28 2013-10-31 黄疸測定システム

Country Status (2)

Country Link
JP (1) JP6266948B2 (ja)
TW (1) TWI501186B (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190041818A (ko) * 2017-10-13 2019-04-23 아주대학교산학협력단 이미지 기반 황달 진단 방법 및 장치
EP3393353A4 (en) * 2015-12-22 2019-08-07 Picterus AS BILIRUBINE DETERMINATION BASED ON AN IMAGE
CN110796642A (zh) * 2019-10-09 2020-02-14 陈浩能 水果品质程度确定方法及相关产品
US10945637B2 (en) 2016-12-28 2021-03-16 Ajou University Industry-Academic Cooperation Foundation Image based jaundice diagnosing method and apparatus and image based jaundice diagnosis assisting apparatus

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000121439A (ja) * 1998-10-15 2000-04-28 Sekisui Chem Co Ltd 色判断装置及び色判断方法
TW501186B (en) * 2000-06-22 2002-09-01 Samsung Electronics Co Ltd Chemical vapor deposition method for depositing silicide and apparatus for performing the same
JP2004535219A (ja) * 2001-04-05 2004-11-25 ロード アイランド ホスピタル 血液成分の非侵襲的測定方法
JP2009505107A (ja) * 2005-08-18 2009-02-05 クゥアルコム・インコーポレイテッド 色分類および皮膚色検出のための画像処理のためのシステム、方法、および装置
WO2014172033A1 (en) * 2013-03-12 2014-10-23 University Of Washington Through Its Center For Commercialization Estimating bilirubin levels

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1999031472A1 (en) * 1997-12-18 1999-06-24 Chromatics Color Sciences International, Inc. Color measurement system with color index for skin, teeth, hair and material substances
TWI259765B (en) * 2004-05-24 2006-08-11 Ming-Yih Lee Noninvasive digital sampling and comparing color method for medical treatment
EP1877774A4 (en) * 2005-03-25 2011-01-12 Cnoga Holdings Ltd OPTICAL SENSOR DEVICE AND IMAGE PROCESSING UNIT FOR MEASURING CHEMICAL CONCENTRATIONS, CHEMICAL SATURATIONS AND BIOPHYSICAL PARAMETERS
JP5829107B2 (ja) * 2011-11-16 2015-12-09 ルネサスエレクトロニクス株式会社 画像処理装置、画像処理方法、及びプログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000121439A (ja) * 1998-10-15 2000-04-28 Sekisui Chem Co Ltd 色判断装置及び色判断方法
TW501186B (en) * 2000-06-22 2002-09-01 Samsung Electronics Co Ltd Chemical vapor deposition method for depositing silicide and apparatus for performing the same
JP2004535219A (ja) * 2001-04-05 2004-11-25 ロード アイランド ホスピタル 血液成分の非侵襲的測定方法
JP2009505107A (ja) * 2005-08-18 2009-02-05 クゥアルコム・インコーポレイテッド 色分類および皮膚色検出のための画像処理のためのシステム、方法、および装置
WO2014172033A1 (en) * 2013-03-12 2014-10-23 University Of Washington Through Its Center For Commercialization Estimating bilirubin levels
JP2016516475A (ja) * 2013-03-12 2016-06-09 ユニバーシティ オブ ワシントン スルー イッツ センター フォー コマーシャリゼーション ビリルビンレベルを推定すること

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3393353A4 (en) * 2015-12-22 2019-08-07 Picterus AS BILIRUBINE DETERMINATION BASED ON AN IMAGE
US10799150B2 (en) 2015-12-22 2020-10-13 Picterus As Image based bilirubin determination
US10945637B2 (en) 2016-12-28 2021-03-16 Ajou University Industry-Academic Cooperation Foundation Image based jaundice diagnosing method and apparatus and image based jaundice diagnosis assisting apparatus
KR20190041818A (ko) * 2017-10-13 2019-04-23 아주대학교산학협력단 이미지 기반 황달 진단 방법 및 장치
KR101998595B1 (ko) * 2017-10-13 2019-07-11 아주대학교산학협력단 이미지 기반 황달 진단 방법 및 장치
US11051716B2 (en) 2017-10-13 2021-07-06 Ajou University Industry-Academic Cooperation Foundation Method and apparatus for jaundice diagnosis based on an image
CN110796642A (zh) * 2019-10-09 2020-02-14 陈浩能 水果品质程度确定方法及相关产品

Also Published As

Publication number Publication date
TW201501070A (zh) 2015-01-01
JP6266948B2 (ja) 2018-01-24
TWI501186B (zh) 2015-09-21

Similar Documents

Publication Publication Date Title
US11382558B2 (en) Skin feature imaging system
Dimauro et al. A new method and a non-invasive device to estimate anemia based on digital images of the conjunctiva
US10285624B2 (en) Systems, devices, and methods for estimating bilirubin levels
JP6545658B2 (ja) ビリルビンレベルを推定すること
AU2012328140B2 (en) System and method for identifying eye conditions
US9418414B2 (en) Image measurement apparatus, image measurement method and image measurement system
CN103340604B (zh) 黄疸自动分析检测方法
KR101998595B1 (ko) 이미지 기반 황달 진단 방법 및 장치
JP6266948B2 (ja) 黄疸測定システム
WO2021259365A1 (zh) 一种目标测温方法、装置及测温系统
US10772535B2 (en) Self-diagnostic method for jaundice and an APP product thereby
CN111598865A (zh) 基于热红外和rgb双摄的手足口病检测方法、装置及系统
KR20170027468A (ko) 영상을 이용한 산소포화도 측정 방법 및 영상을 이용한 산소포화도 측정 방법을 기록한 컴퓨터로 읽을 수 있는 기록 매체
US20230239419A1 (en) Image display system and image display method
KR100865275B1 (ko) 설진 영상의 촬영 방법 및 그 장치
Outlaw et al. Smartphone colorimetry using ambient subtraction: application to neonatal jaundice screening in Ghana
US20230258501A1 (en) Color chart
CN106127675B (zh) 颜色一致性方法和装置
CN114494299A (zh) 温度检测设备
Kalra et al. Ideal illumination for smartphone-based trabeculectomy bleb photography
CN113218507A (zh) 人体检测装置和人体检测方法
CN113029347A (zh) 报警配置装置和报警配置方法
Outlaw et al. Smartphone screening for neonatal jaundice via ambient-subtracted sclera chromaticity: neoSCB app pilot study
KR101019977B1 (ko) 초음파영상진단기에서의 자동 영역 측정 방법
WO2023275774A1 (en) Non-invasive device for quickly estimating anaemia

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160615

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170314

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170310

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170529

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170627

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170830

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171114

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20171116

R150 Certificate of patent or registration of utility model

Ref document number: 6266948

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313114

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees