TW201531992A - 表面狀態測定分析資訊管理系統及表面狀態測定分析資訊管理方法 - Google Patents

Abstract

提供若對成為對象的表面持續定期攝影時，可有效利用所被攝影到的畫像資料，並且可作為動態畫像或幻燈片播放來顯示的表面狀態測定分析資訊管理系統及表面狀態測定分析資訊管理方法。 對應時間經過依序攝影成為對象的表面，並且依序記憶被攝影到的畫像資料時，將被依序記憶的畫像彼此進行比較，判定在畫像彼此是否有互相大致一致的畫像區域。若有互相大致一致的畫像區域的畫像時，設定以其中一方畫像為基準的座標系，決定將互相大致一致的畫像區域與該其中一方畫像相重疊的狀態的另一方畫像的座標系中的位置。對於決定出位置的畫像，包含其之後被攝影的畫像而未決定出位置的畫像相重疊時，決定該畫像的位置。

Description

表面狀態測定分析資訊管理系統及表面狀態測定分析資訊管理方法

本發明係關於用以根據時間經過，依序攝影例如作為有經時改變的可能性的表面的肌膚表面、各種植物(包含蔬菜、水果)的葉子、果實、莖、樹幹、根等的表面、動物的特定部位的表面、經時劣化的無機物的表面等狀態經時改變的表面，以可閱覽的方式管理所被攝影到的畫像資料或其分析結果等的表面狀態測定分析資訊管理系統及表面狀態測定分析資訊管理方法。

一般而言，在肌膚保養用化妝品或美容器具(肌膚保養裝置：保養美容裝置)的銷售中，例如為了了解肌膚狀態，進行使用肌膚用攝影機，將肌膚放大攝影，掌握肌膚狀態後，再銷售對應肌膚狀態的皮膚保養用化妝品、洗臉用品等或皮膚保養用器具。

此時必須前往設置有肌膚用攝影機，而且有可根據所被攝影到的畫像資料來判定肌膚狀態，且可根據肌膚狀態來建議肌膚保養方法的店員的店舖。但是，由於 要去到店舖很麻煩，或者去店舖接受如上所述的服務之後被推銷購買商品也很麻煩，因此不易定期攝影肌膚狀態。

因此，在行動電話、智慧型手機、平板電腦等可透過無線電話線路或其他無線通訊線路而在網際網路進行存取的攜帶式無線終端，連接肌膚用數位攝影機作為周邊機器，或例如在攜帶式無線終端的內置數位攝影機裝設具備有肌膚攝影用轉換鏡頭(conversion lens)的透鏡模組，可由使用者自己進行肌膚攝影已被提出。

此外，使用攜帶式無線終端，將所被攝影到的畫像資料，傳送至根據肌膚的畫像資料來分析肌膚狀態的業者的伺服器，藉此即使未前往化妝品銷售店舗，亦可分析肌膚狀態的系統已被提出(參照例如專利文獻1~5)。此時，在接收到測定資料的伺服器中，例如自動進行測定結果的分析、或使測定資料顯示而使操作人員輸入分析結果。

此時雖然必須購買肌膚用數位攝影機或肌膚用透鏡模組等，但是藉由使用如上所示之肌膚測定用系統，不會對使用者造成較大負擔，而可定期進行肌膚測定。

此外，即使為肌膚以外，亦可應用上述肌膚攝影用攝影機在例如測定或記錄成為農作物的植物葉子或果實的表面狀態變化、或測定或記錄牆壁等構造物的表面長期劣化的狀態。

此時，例如農民測定農作物的表面狀態變化 時、或一般家庭對家庭菜園的蔬菜或觀葉植物表面狀態變化進行攝影且記錄時，不需要較大的設備投資，即可低成本攝影及記錄。

[先前技術文獻]

[專利文獻]

[專利文獻1]日本特開2005-148797號公報

[專利文獻2]日本特開2004-354207號公報

[專利文獻3]日本特開2005-56165號公報

[專利文獻4]日本特開2002-15068號公報

[專利文獻5]日本特開2002-366651號公報

但是，在進行肌膚狀態測定時，例如可藉由對臉部相同位置定期攝影且分析，記憶肌膚狀態變化，根據所記憶的結果，來判斷肌膚狀態改善、或變差、或沒有改變。

例如，藉由使用肌膚保養用品等，可判斷已惡化的肌膚狀態是否形成為良好狀態等。此外，可判定雀斑等變深或變大，相反地，雀斑變淡或變小。

在此，例如臉部肌膚由於為大幅彎曲的曲面，因此難以將大範圍攝影成一樣地放大的狀態，基本上 對狹窄範圍進行攝影。此時，使用者即使在例如每天1次或2次程度攝影肌膚的情形下，亦難以對與之前攝影的場所為相同場所進行攝影，此外，若攝影間隔變長，即難以對相同場所進行攝影。此外，在定期攝影複數部位的情形下，各部位的位置亦往往含糊不清。

若相較上有比較明確的雀斑時，雖可一邊以鏡子確認雀斑位置一邊進行攝影，但是即使如此，攝影位置亦依每次攝影而稍微偏移。因此，雖然亦會有可根據定期依序攝影到的肌膚畫像來讀取雀斑顏色或形狀變化的情形，但是即使如此，若雀斑近接存在複數個時，有依攝影範圍而分不清楚哪一個雀斑的畫像的可能性。此外，肌膚的皮膚紋理狀態等若有部分惡化的部分時，無法判斷出在拍攝到惡化部分時、及未拍攝到時，為肌膚狀態伴隨時間經過的變化、抑是因攝影位置不同所造成的變化。因此，即使定期攝影肌膚，亦難以掌握伴隨時間經過的肌膚的皮膚紋理或雀斑的狀態變化。

此外，若先記憶定期攝影到的肌膚的畫像資料時，藉由顯示該畫像資料作為動態畫像或幻燈片播放(slideshow)，有可看到例如肌膚狀態逐漸改善的樣子的可能性。藉此，有吸引使用者的興趣，達成使用者增加的可能性。此外，可催促使用者定期攝影肌膚。

但是，所被攝影到的畫像係在每逢每次攝影時，攝影位置上下左右偏移，即使在相較上攝影位置較為一致的情形下，朝向上下左右的偏向大而不可能作為動態 畫像來觀看，即使進行幻燈片播放，亦會在每次攝影位置有偏移，因此難以得知幻燈片前後關係，並不一定可確認肌膚狀態變化。此外，攝影位置不相一致時，會有不存在前面的幻燈片與後面的幻燈片相重疊的部分的情形，例如因在肌膚粗糙部位與肌膚良好部位相混的狀態下顯示，因此難以確認肌膚狀態變化。

在對植物或其他而非為肌膚進行攝影時，亦除了基本上將攝影機固定在三腳架等來進行攝影之外，會發生與上述肌膚攝影時相同的問題。

本發明係鑑於前述情形而完成者，目的在提供若對成為對象的表面持續定期攝影時，可有效利用所被攝影到的畫像資料，並且可作為動態畫像或幻燈片播放來顯示的表面狀態測定分析資訊管理系統及表面狀態測定分析資訊管理方法。

本發明之表面狀態測定分析資訊管理系統之特徵為：具備有：攝影手段，其係無須固定攝影位置，對成為測定對象的表面進行攝影而生成畫像資料；畫像記憶手段，其係記憶前述畫像資料及該畫像資料的攝影日；及位置決定手段，其係隔著期間，藉由前述攝影手段進 行複數次攝影，藉此成為攝影對象的前述表面上的攝影位置偏移的複數前述畫像資料被記憶在前述畫像記憶手段時，將被記憶在前述畫像記憶手段的複數前述畫像資料進行比較，決定複數前述畫像資料的一個座標系中的相對位置，可將決定出前述座標系的相對位置的各畫像資料，依攝影日順序配置在前述座標系的相對位置進行顯示。

在本發明之前述構成中，較佳為前述位置決定手段係若在互相比較的前述畫像資料有大致一致的畫像區域時，根據前述畫像區域，決定複數前述畫像資料的一個前述座標系中的相對位置。

此外，在本發明之前述構成中，較佳為具備有：重疊感測手段，其係將依序被記憶在前述畫像記憶手段的前述畫像資料彼此進行比較，判定在前述畫像資料彼此是否有互相大致一致的前述畫像區域，前述位置決定手段係若有互相大致一致的前述畫像區域時，設定以其中一方前述畫像資料為基準的前述座標系，決定將互相大致一致的前述畫像區域與該其中一方前述畫像資料相重疊的狀態的另一方前述畫像資料的前述座標系中的位置，前述重疊感測手段係將藉由前述位置決定手段已決定出前述座標系的位置的前述畫像資料、及尚未決定出前述座標系的位置的前述畫像資料進行比較，來判定是否有互相大致一致的前述畫像區域， 前述位置決定手段係對於已決定出前述座標系的位置的前述畫像資料，若有具有大致一致的前述畫像區域的前述座標系的位置未決定的前述畫像資料時，根據將決定出前述座標系的位置的前述畫像資料、與未決定出前述座標系的位置的前述畫像資料，以互相大致一致的前述畫像區域互相重疊的方式進行配置時的前述畫像資料彼此的彼此位置關係，決定未決定出前述座標系的位置的前述畫像資料的前述座標系的位置。

本發明之表面狀態測定分析資訊管理方法係在表面狀態測定分析資訊管理系統所進行的表面狀態測定分析資訊管理方法，該表面狀態測定分析資訊管理系統具備有：攝影手段，其係無須固定攝影位置，對成為測定對象的表面進行攝影而生成畫像資料；及畫像記憶手段，其係記憶前述畫像資料及該畫像資料的攝影日，該表面狀態測定分析資訊管理方法之特徵為：具備有：位置決定步驟，其係隔著期間，藉由前述攝影手段進行複數次攝影，藉此成為攝影對象的前述表面上的攝影位置偏移的複數前述畫像資料被記憶在前述畫像記憶手段時，將被記憶在前述畫像記憶手段的複數前述畫像資料進行比較，決定複數前述畫像資料的一個座標系中的相對位置，可將決定出前述座標系的相對位置的各畫像資料，依 攝影日順序配置在前述座標系的相對位置進行顯示。

在本發明之前述構成中，較佳為在前述位置決定步驟中係若在互相比較的前述畫像資料有大致一致的畫像區域時，根據前述畫像區域，決定複數前述畫像資料的一個前述座標系中的相對位置。

此外，在本發明之前述構成中，較佳為具備有：重疊感測步驟，其係將依序被記憶在前述畫像記憶手段的前述畫像資料彼此進行比較，判定在前述畫像資料彼此是否有互相大致一致的前述畫像區域，在前述位置決定步驟中，係若有互相大致一致的前述畫像區域時，設定以其中一方前述畫像資料為基準的前述座標系，決定將互相大致一致的前述畫像區域與該其中一方前述畫像資料相重疊的狀態的另一方前述畫像資料的前述座標系中的位置，在前述重疊感測步驟中，係將藉由前述位置決定步驟已決定出前述座標系的位置的前述畫像資料、及尚未決定出前述座標系的位置的前述畫像資料進行比較，來判定是否有互相大致一致的前述畫像區域，在前述位置決定步驟中，係對於決定出前述座標系的位置的前述畫像資料，若有具有大致一致的前述畫像區域的前述座標系的位置未決定的前述畫像資料時，根據將決定出前述座標系的位置的前述畫像資料、與未決定出前述座標系的位置的前述畫像資料，以互相大致一致的前述畫像區域互相重疊的方式進行配置時的前述畫 像資料彼此的彼此位置關係，決定未決定出前述座標系的位置的前述畫像資料的前述座標系的位置。

藉由如上所示之構成，由所被攝影到的畫像的重疊狀態來決定要被攝影的各畫像的相對位置，例如將成為攝影對象的表面設為肌膚表面時，可判別肌膚粗糙的部分與不粗糙的部分是否為各自被拍攝的畫像、或依時間經過，肌膚粗糙的部分是否成為不粗糙的狀態。

因此，若對肌膚定期攝影時，即使攝影位置稍微不均，亦可判定因時間經過所致之肌膚狀態的變化。亦即，即使可每次藉由任何手段來對肌膚相同位置進行攝影，即使在攝影到肌膚的畫像資料分別有位置偏移，亦可藉由各畫像資料之中已決定出位置的資料，在配置該等畫像資料的範圍內，以一定程度掌握肌膚狀態的分布，可判別肌膚狀態的變化係因畫像資料的攝影範圍的位置不同所致、或因時間經過所致。

藉此，即使未設置勉強地使肌膚的攝影範圍成為相同的機構，亦可例如意識而儘可能對相同位置進行攝影，藉此輕易得知肌膚狀態因時間經過所造成的變化。

此外，即使成為對象的表面為肌膚表面以外，同樣地即使未將攝影機固定在三腳架等，亦可意識而儘可能對相同位置進行攝影，藉此得知表面狀態為因時間經過而改變，或依位置而改變，可輕易得知表面狀態因時間經過所致之變化。其中，以肌膚之外的對象物而言，例如有各種植物的表面、尤其葉子或果實的表面等，並且可 為無機物的表面，將因成長、生病、劣化等，表面狀態會經時改變者作為對象。

此外，畫像記憶手段並非必須為1個裝置，亦可為由：暫時保存被攝影到的畫像之如緩衝區般的暫時畫像記憶手段、及將被暫時記憶在該畫像記憶手段的畫像移動來進行記憶的畫像記憶手段所構成者。此時，亦可形成為將與將被攝影且已決定位置的畫像相比較的之前的畫像資料記憶在暫時畫像記憶手段者。此外，亦可形成為在暫時畫像記憶手段，即使與決定出位置的畫像資料相比較，亦記憶原未決定位置的畫像資料者。

此外，在本發明之前述表面狀態測定分析資訊管理系統中，較佳為前述重疊感測手段係當判定在前述畫像資料彼此是否有互相大致一致的前述畫像區域時，抽出與被前述畫像資料的前述攝影手段所攝影到的對象物的種類相對應的特徵點的位置，將每個前述畫像資料的前述特徵點的配置型樣相比較，若前述特徵點的配置型樣有大致一致的部分時，即判定為具有互相大致一致的前述畫像區域。

此外，在本發明之前述表面狀態測定分析資訊管理方法中，較佳為在前述重疊感測步驟中，係當判定在前述畫像資料彼此是否有互相大致一致的前述畫像區域時，抽出與被前述畫像資料的前述攝影手段所攝影到的對象物的種類相對應的特徵點的位置，將每個前述畫像資料的前述特徵點的配置型樣相比較，若前述特徵點的配置型 樣有大致一致的部分時，即判定為具有互相大致一致的前述畫像區域。

藉由如上所示之構成，抽出各畫像資料中的特徵點的位置，辨識特徵點的配置型樣，藉此可輕易辨識在畫像資料彼此是否有相重疊的部分。其中，特徵點較佳為亦存在於成為對象的表面的大致任一者，且可由畫像資料辨識。例如，若將成為對象的表面設為肌膚時，考慮將毛細孔的中心作為特徵點。此外，若為植物的葉子，則可將葉脈的分岔點作為特徵點。

其中，若要攝影的葉子為可從複數葉子之中特定，有可從構成葉脈的粗主脈與細側脈之中主要由主脈的分岔點特定葉子表面的位置的可能性，亦可對應為厚葉且側脈難以從表面看到的葉子。此外，若在果實的表面有圖樣或凹凸，可由此決定特徵點。在無機物中，亦可在例如大理石等顏色有變化者中，決定特徵點。

此外，在本發明之前述表面狀態測定分析資訊管理系統中，較佳為被形成為前述攝影手段的前述攝影對象的前述表面被設為肌膚的表面，藉由前述重疊感測手段，由前述畫像資料被抽出的前述特徵點為前述肌膚表面上的各毛細孔的預定部位。

此外，在本發明之前述表面狀態測定分析資訊管理方法中，較佳為被形成為前述攝影手段的前述攝影對象的前述表面被設為肌膚的表面，前述重疊感測步驟中由前述畫像資料被抽出的前述特 徵點為前述肌膚表面上的各毛細孔的預定部位。

藉由如上所示之構成，即使為缺乏作為比較對象的特徵部分的肌膚畫像作為畫像，亦藉由抽出毛細孔作為特徵部分，由各毛細孔的配置比較2個肌膚畫像，可找出成為互相大致相同畫像的部分，且可判定各畫像資料的重疊。其中，預定部位係指設定有例如毛細孔的中心位置、重心位置、畫像上的右端位置、左端位置、上端位置、下端位置等的位置。在此由於以例如座標系的座標設定特徵點的位置，因此若在包含所被攝影到的特徵點的部分(毛細孔)有面積時，將預定的位置作為特徵點。

此外，基本上，例如觀看臉部肌膚時，除了鼻、眼、耳、口等以外，即使對任何部位進行攝影，亦形成為不太有特徵的畫像，將位置錯開來對複數畫像進行攝影時，雖然難以判定各畫像的哪個部分相重疊，但是可藉由毛細孔的配置，相較上較容易判定各畫像的哪個部分會相重疊。但是，例如，依場所會有些微改變，但是在肌膚大致一樣地配置有毛細孔，並且健康的毛細孔若在沒有毛時呈閉合，難以辨識。因此，亦可辨識由肌膚的毛細孔長出的毛，毛係形成為前端側細且毛細孔側粗的形狀，因此將毛粗的端部視為毛細孔，將該毛細孔的預定位置設為特徵點。此時，由長毛而被辨識的毛細孔、及沒有毛而未被辨識的毛細孔，毛細孔的配置型樣依肌膚的場所而異。

此外，在本發明之前述表面狀態測定分析資訊管理系統中，較佳為被形成為前述攝影手段的前述攝影 對象的前述表面係被設為肌膚的表面，藉由前述重疊感測手段，由前述畫像資料所抽出的前述特徵點為前述肌膚表面上的預定尺寸以下的各雀斑的預定部位。

此外，在本發明之前述表面狀態測定分析資訊管理方法中，較佳為被形成為前述攝影手段的前述攝影對象的前述表面係被設為肌膚的表面，前述重疊感測步驟中由前述畫像資料所抽出的前述特徵點為前述肌膚表面上的預定尺寸以下的各雀斑的預定部位。

藉由如上所示之構成，即使為缺乏作為比較對象的特徵部分的肌膚畫像作為畫像，亦可由作為特徵點的雀斑的配置型樣，判定各畫像資料的重疊。

在此，預定尺寸以下的雀斑係指主要形成在毛細孔部分的較小雀斑，黑色素滯留在毛細孔部分者。因此，如上所述將毛細孔作為特徵點時，例如可對於如上所述由毛的肌膚側的端部辨識毛細孔的方法，取代將預定尺寸以下的雀斑辨識為毛細孔的方法，或加以組合。若加以組合時，亦可例如將特徵點分為僅有毛的點、僅有雀斑的點、及毛與雀斑雙方點等來比較配置型樣。

此外，在本發明之前述表面狀態測定分析資訊管理系統中，較佳為具備有畫像顯示手段，其係將被記憶在前述畫像記憶手段的前述畫像資料，依前述畫像資料的前述攝影日順序進行顯示， 前述畫像顯示手段係在顯示畫面上設定前述座標系，將決定出前述座標系的位置的各畫像資料配置在前述座標系的位置而依前述攝影日順序進行顯示。

此外，在本發明之前述構成中，較佳為前述畫像顯示手段係將前述畫像資料以前述攝影日順序顯示在最前面，且保持在顯示出與比被顯示在最前面的該畫像資料為更前被顯示的前述畫像資料的最前面所顯示的該畫像資料不相重疊的部分的狀態。

此外，在本發明之前述構成中，較佳為前述畫像顯示手段係當依前述攝影日順序顯示前述畫像資料時，在顯示該畫像資料的顯示範圍係包含：具有被顯示的該畫像資料的部分、及沒有該畫像資料的部分，在沒有該畫像資料的部分，若有相較於被顯示的該畫像資料，前述攝影日為更前或更後的前述畫像資料時，生成由前述攝影日為更前或更後的前述畫像資料被內插的畫像資料，在被顯示在前述顯示範圍的沒有前述畫像資料的部分顯示被內插的前述畫像資料。

此外，在本發明之前述表面狀態測定分析資訊管理方法中，較佳為具備有畫像顯示步驟，其係將被記憶在前述畫像記憶手段的前述畫像資料，依前述畫像資料的前述攝影日順序進行顯示，在前述畫像顯示步驟中係在顯示畫面上設定前述座標系，將決定出前述座標系的位置的各畫像資料配置在前述座標系的位置而依前述攝影日順序進行顯示。

此外，在本發明之前述構成中，較佳為在前述畫像顯示步驟中係將前述畫像資料以前述攝影日順序顯示在最前面，且保持在顯示出與比被顯示在最前面的該畫像資料為更前被顯示的前述畫像資料的最前面所顯示的該畫像資料不相重疊的部分的狀態。

此外，在本發明之前述構成中，較佳為在前述畫像顯示步驟中係當依前述攝影日順序顯示前述畫像資料時，在顯示該畫像資料的顯示範圍係包含：具有被顯示的該畫像資料的部分、及沒有該畫像資料的部分，在沒有該畫像資料的部分，若有相較於被顯示的該畫像資料，前述攝影日為更前或更後的前述畫像資料時，生成由前述攝影日為更前或更後的前述畫像資料被內插的畫像資料，在被顯示在前述顯示範圍的沒有前述畫像資料的部分顯示被內插的前述畫像資料。

藉由如上所示之構成，若將畫像資料依攝影順序直接顯示為動態畫像或幻燈片播放時，因各畫像資料的位置偏移，形成為接近嚴重手振的顯示，但是藉由將各畫像資料配置在其座標位置而依序顯示畫像資料，並不會形成為嚴重手振狀態的顯示，可形成為充分辨識肌膚變化的顯示。其中，以顯示方法而言，若顯示在攝影順序為前的肌膚畫像至少一部分相重疊而攝影順序為後的肌膚畫像時，攝影順序為前的肌膚畫像相重疊的部分被消去而顯示攝影順序為後的肌膚畫像，但是攝影順序為前的肌膚畫像不相重疊的部分係以形成為直接顯示肌膚畫像的狀態為 佳。

此時，形成為在1個顯示畫面中同時顯示攝影時期不同的肌膚畫像的狀態，但是被顯示的肌膚畫像數愈多，在攝影時期為較舊的肌膚畫像係愈重疊多數新的肌膚畫像，所顯示的部分幾乎消失，所顯示的肌膚畫像進行切換。此外，依序顯示攝影時期為後的肌膚畫像時，在該肌膚畫像的周圍係殘留有相較於所被顯示的肌膚畫像為攝影時期較前的肌膚畫像的顯示，將新顯示的肌膚畫像與從其周圍之前被顯示的肌膚畫像進行比較，藉此輕易辨識肌膚狀態的經時變化。

其中，亦可設置在可顯示比肌膚畫像的肌膚的攝影範圍為更廣的肌膚的範圍的狀態下，限定實際顯示的肌膚範圍的顯示範圍規制手段。此時，以設定所被攝影到的肌膚畫像可被顯示最多的顯示範圍為佳。此外，此時的顯示範圍亦可形成為比肌膚畫像的攝影範圍為更窄的範圍。

此外，若依序顯示在設定有畫像資料的顯示範圍時，各顯示範圍全體的畫像資料(以下稱為顯示用畫像資料)係例如由具有畫像資料的部分與沒有的部分所構成。此時，亦可具有畫像資料的部分係顯示該畫像資料與顯示畫像資料相重疊的範圍，沒有畫像資料的部分係作成由攝影順序比所被顯示的畫像資料為更前的畫像資料、及更後的畫像資料被內插的內插畫像資料，在顯示用畫像資料沒有畫像資料的部分配置該內插畫像資料。

此時，各顯示用畫像資料係由內插畫像資料的部分與被攝影到的畫像資料的部分所構成。此外，一旦作成顯示用畫像資料之後，可利用例如跟前的顯示用畫像資料，作為比要顯示的畫像資料為更前的畫像資料且為供內插之用的畫像資料。此時，可使用包含跟前的內插處理部分的顯示用畫像資料、及比應顯示的畫像資料為更後的畫像資料，作成內插畫像資料，可輕易進行內插處理。

藉由本發明之表面狀態測定分析資訊管理系統及表面狀態測定分析資訊管理方法，為掌握肌膚狀態的經時變化，儘可能對肌膚相同範圍儘可能定期攝影來掌握肌膚狀態變化時，即使在所被攝影到的各肌膚畫像所攝影到的肌膚的範圍有位置偏移，亦藉由掌握各肌膚畫像的相對位置，可更加明確掌握相同肌膚的位置的經時變化。

1‧‧‧肌膚狀態測定裝置(肌膚用攝影機、智慧型手機+透鏡 模組：肌膚攝影手段)

2‧‧‧肌膚保養(美容)裝置

3‧‧‧智慧型手機(肌膚畫像顯示手段)

3a、3b、3c、3d、3e、3f、3g‧‧‧顯示畫面

4‧‧‧網際網路(網路)

5‧‧‧資料管理伺服器

5a‧‧‧顧客(使用者)個人資訊管理資料庫

5b‧‧‧肌膚履歷資料庫(肌膚畫像記憶手段)

5c‧‧‧攝影點資料庫

5d‧‧‧使用化妝品履歷資料庫

5e‧‧‧詳細診斷結果資料庫

5f‧‧‧簡易診斷程式

5g‧‧‧肌膚基準值資料庫

5h‧‧‧資料二次利用者存取權管理資料庫

5i‧‧‧機器資訊資料庫

5j‧‧‧專用應用軟體

5k‧‧‧控制部(重疊感測手段、位置決定手段)

5l‧‧‧肌膚保養用資料庫

5m‧‧‧校正用資料庫

5n‧‧‧排程用資料庫

5o‧‧‧修整病歷資料庫

5p‧‧‧登錄化妝品資料庫

6‧‧‧立約者用戶端

11‧‧‧感測器部

12‧‧‧控制部

13‧‧‧USB界面

20‧‧‧毛細孔

21‧‧‧作動部

22、22a、22b、22c‧‧‧畫像資料

26‧‧‧顯示範圍

40、41、42‧‧‧畫面資料

51‧‧‧使用者資料用資料庫

52‧‧‧測定資料用資料庫

53‧‧‧資料分析用資料庫

54‧‧‧立約者用資料庫

61‧‧‧化妝品公司A伺服器、化妝品公司B伺服器

62‧‧‧詳細診斷系統

63‧‧‧推薦化妝品決定部

64‧‧‧建議決定部

72‧‧‧攝影機

73‧‧‧控制部

74‧‧‧快閃記憶體

80‧‧‧透鏡模組

80a‧‧‧框體

80c‧‧‧開口部

81‧‧‧轉換鏡頭

81a、81b‧‧‧透鏡

82‧‧‧LED

83‧‧‧電路基板

84‧‧‧LED驅動電路

88‧‧‧電源電路

90‧‧‧透鏡框體

90a‧‧‧鏡筒

90b‧‧‧抵接部

圖1係顯示本發明之實施形態的表面狀態測定分析資訊管理系統的概略區塊圖。

圖2係顯示轉換鏡頭之一例的概略圖。

圖3係顯示前述表面狀態測定分析資訊管理系統的區塊圖。

圖4係顯示前述表面狀態測定分析資訊管理系統的資 料管理伺服器的區塊圖。

圖5係用以說明前述資料管理伺服器的使用者資料用資料庫的圖。

圖6係用以說明前述資料管理伺服器的測定資料用資料庫的圖。

圖7係用以說明前述表面狀態測定分析資訊管理系統中的持續性肌膚攝影方法的圖。

圖8係用以說明前述表面狀態測定分析資訊管理系統中的持續性肌膚攝影方法的圖。

圖9係用以說明由所拍攝的毛細孔的配置型樣，2個畫像資料相重疊的圖。

圖10係用以說明作為畫像資料幻燈片播放的顯示方法的圖。

圖11(a)及(b)係用以說明作為畫像資料的幻燈片播放的其他顯示方法的圖。

圖12係用以說明前述表面狀態測定分析資訊管理系統中的登錄攝影點追加/變更處理的流程圖。

圖13係用以說明前述表面狀態測定分析資訊管理系統中的畫像中心的位置座標決定處理的流程圖。

圖14係用以說明前述表面狀態測定分析資訊管理系統中的畫像中心的位置座標決定處理中的未定義畫像的位置決定處理的流程圖。

圖15係用以說明前述表面狀態測定分析資訊管理系統中的畫像資料的顯示處理方法的圖。

圖16係用以說明前述表面狀態測定分析資訊管理系統中的畫像資料的其他顯示處理方法的圖。

圖17係用以說明藉由內插，作成在顯示處理中所被顯示的顯示用畫面資料的顯示用畫面資料的作成處理的圖。

圖18係用以說明進行畫像資料的幻燈片播放顯示的智慧型手機的畫面構成的圖。

以下一面參照圖示，一面說明本發明之實施形態。

該實施形態的表面狀態(肌膚狀態)測定分析資訊管理系統及表面狀態(肌膚狀態)測定分析資訊管理方法係對表面狀態測定分析資訊管理系統的會員亦即肌膚狀態測定裝置的使用者，以低成本(例如免費或較為便宜的會費)提供由肌膚狀態測定裝置的測定資料取得自己肌膚狀態的分析結果的服務，藉此請使用者辨識自己的肌膚狀態。

此時，藉由以低成本得知肌膚狀態，來使肌膚狀態測定裝置的銷售數增加，並且促使使用者頻繁進行肌膚狀態的測定，由該等測定資料來取得分析結果，由多數使用者頻繁地收集測定資料。此時請使用者使用包含化妝品的肌膚保養用品或肌膚保養裝置，且掌握肌膚狀態改善的情形，藉此促進肌膚保養用品或肌膚保養裝置的銷售。

此外，若收集到多數肌膚狀態的測定資料時，可請化妝品製造商或銷售公司(化妝品公司)以收費方式，將所收集到的資料利用在各種肌膚保養用品的開發。此時，不僅測定資料，藉由附加使用者正在使用的肌膚保養用品或肌膚保養裝置、甚至使用者的大概年齡或居住地區或年收或職業等附帶資料，對測定資料附加附加價值，而可更有效地利用測定資料。藉此，不僅購買肌膚狀態測定裝置等的使用者，亦可由利用上述測定資料的化妝品公司等資料的二次利用者獲得利益。

如圖1所示，該實施形態的表面狀態測定分析資訊管理系統係具備有：可連接肌膚狀態測定裝置1之作為使用者用戶端的智慧型手機3；可透過網際網路4(網路)而與智慧型手機3相連接的資料管理伺服器5；及作為立約者用戶端6的化妝品公司等之合作公司的電腦系統。

智慧型手機3係具備有：內置數位攝影機；記憶被數位攝影機所攝影到的畫像資料22(圖示於圖9、圖10)或其他資料或應用程式等之作為記憶手段(儲存裝置)的快閃記憶體；顯示畫像等的顯示器；及執行OS或應用程式的控制部。如後所述，顯示器係顯示被攝影且記憶的畫像資料22作為動態畫像或幻燈片播放。

肌膚狀態測定裝置1亦可為例如與智慧型手機3或PC等使用者用戶端作USB連接或無線連接的肌膚用攝影機(肌膚攝影手段)。肌膚用攝影機係具有由未圖示的攝像透鏡、及照明用LED所構成的光學系，具備有： 感測由該光學系所得的畫像的感測器部11、控制部12、及USB(Universal Serial Bus，通用序列匯流排)界面13。照明用LED係可射出例如2色的光，可切換膚色光(黃色比白色為強的光)及白色光來進行照射。若照射膚色光，可清楚攝影肌膚狀態，且肌膚的皮膚紋理(肌理)狀態分析變得較為容易。

此外，若以白色光照明時，藍光相對比上述膚色光強，可得容易辨識雀斑的畫像資料22。

在作為該肌膚用攝影機的肌膚狀態測定裝置1中，設有可切換皮膚紋理模式與雀斑模式來進行攝影，且切換模式的切換開關。與藉由肌膚用攝影機所得之作為測定資料的攝像資料相關連，將表示皮膚紋理模式或雀斑模式的資料輸出至智慧型手機3。

其中，在雀斑攝影用的白色光的LED側係使用偏光方向呈正交的2塊偏光板，在皮膚紋理攝影用的膚色的LED係形成為未使用偏光板(第1偏光板)的構成。藉由使用2塊偏光方向呈正交的偏光板，將照明光偏光，並且將在肌膚作反射的照明光再次通過偏光板來進行攝影，藉此減低肌膚表面的反射光，可形成為主要攝影在有雀斑的肌膚表層部內作反射的反射光的狀態。此外，膚色的分析亦可藉由顏色補正，形成為使用例如膚色光的LED者。

其中，作為肌膚狀態測定裝置1的肌膚攝影機與智慧型手機3的資料通訊並非侷限於USB，亦可使用 其他有線的序列或平行通訊、或無線的Bluetooth(註冊商標)或WiFi或NFC(Near Field Communication，近距離無線通訊技術)等。

此外，以肌膚狀態測定裝置1而言，除了上述肌膚用攝影機以外，亦可為例如測定經表皮水分蒸散量的周知蒸散計，亦可為量測肌膚之黑色素量的黑色素計。

此外，雖非為直接測定肌膚狀態的裝置，但是亦可將測定紫外線(UV)的裝置(UV檢查器)作為環境測定感測器而與智慧型手機3相連接。其中，在觀看紫外線對肌膚的影響的方面，UV檢查器較佳為分別可連續輸出有關黑色素生成的UV-A、及引起發炎的UV-B來作為各自獨立的數值資料。

此外，若肌膚狀態測定裝置1為用以攝影肌膚的肌膚用攝影機時，亦可形成為使用被內置在智慧型手機3的數位攝影機者。此時，使用具備有：用以使用智慧型手機3的數位攝影機來攝影肌膚的轉換鏡頭；及控制照明用的上述LED及偏光板、LED的亮燈的控制部的透鏡模組。此時，所被攝影到的畫像資料22係被記憶在智慧型手機3，因此智慧型手機3與透鏡模組不需要進行資料通訊，但是亦可形成為例如藉由與上述控制部的通訊，由智慧型手機3側來控制LED的亮燈。

在圖2中顯示具備有如上所示之轉換鏡頭的智慧型手機3之一例。

在該例中，係具備有：智慧型手機3；及具有由用以 被裝設在智慧型手機3的攝影機72來放大近拍肌膚的2枚透鏡81a、81b所成的轉換鏡頭81及攝影的照明用LED82的透鏡模組80。

智慧型手機3係具備有：對被攝體進行攝影的攝影機72；記憶以攝影機72所被攝影到的畫像資料或其他資料的快閃記憶體74；及控制攝影機72或快閃記憶體74、或智慧型手機3的各種電子零件的控制部73。

透鏡模組80係具備有：上述轉換鏡頭81及LED82、驅動LED82的LED驅動電路84、及收容該等的框體80a在框體80a內，轉換鏡頭81的二枚透鏡81a、81b係被支持在鏡筒(barrel)90a，在攝影機72的主透鏡(省略圖示)之前，以使攝影機72的主透鏡的光軸與二枚透鏡81a、81b的光軸大致相合的方式予以配置。

此外，框體80a係在鏡筒90a的前側(被攝體側)具備有透鏡框體90。透鏡框體90係前端面被形成為當作為被攝體的肌膚攝影時抵接於肌膚的抵接部90b，在抵接部90b抵接於肌膚的狀態下遮住外光。此外，在抵接部90b係形成有開口部80c，攝影肌膚面對開口部80c的部分。

鏡筒90a係在支持由透鏡81a及透鏡81b所構成的轉換鏡頭81的狀態下，被固定在框體80a內的透鏡框體90的基端側(被裝設在攝影機72之側)。此外，在框體80a內係支持有具備有：朝向透鏡框體90的抵接部90b的開口部80c照射攝影用照明光的LED82、及驅動該 LED82的LED驅動電路84的電路基板83。

此外，在電路基板83係配備有例如1個LED82，但是亦可以例如複數LED82以由各自不同的位置照明肌膚的方式而設。此外，透鏡模組80係具備有：具備有對LED82、LED驅動電路84等供給電力的電池的電源電路88、及電源開關(省略圖示)。

上述形態係智慧型手機與轉換鏡頭的組合之例，但是亦可為藉由光學系的高功能化，將前述轉換鏡頭的功能組入在智慧型手機內部的形態。

此外，以照明而言，並非使用專用的LED，而若使用太陽光或室內燈等外光時，亦可形成為例如使用由透明鏡筒及被安置在該鏡筒的轉換鏡頭所構成的透鏡模組者。此時，由於沒有必須要有電力的LED等構成，因此最低限度若有抵觸肌膚的鏡筒、及設在鏡筒的透鏡即可。

前述使用者用戶端基本上為智慧型手機3，例如為具備有根據筆記型個人電腦、或平板電腦型(pad型)個人電腦等的程式來進行處理的通用運算處理裝置(例如CPU)的裝置。以使用者用戶端而言，藉由無線電話線路或其他無線通訊線路，以可與作為網路的網際網路4相連接且可攜帶的機器為佳。

作為使用者用戶端的智慧型手機3係例如可使用攜帶用無線電話線路來作為無線通訊，並且可使用無線LAN(WiFi)，使用該等無線通訊，可連接於作為網路的 網際網路4，形成為無線攜帶式終端(無線攜帶式用戶端)。

此外，在智慧型手機3中，例如可執行經下載所安裝的應用軟體(以下簡稱為專用應用軟體5j(圖示於圖3))，在該實施形態中，將肌膚狀態測定用應用軟體由資料管理伺服器5下載至智慧型手機3，來作為專用應用軟體5j。

在智慧型手機3所執行的專用應用軟體5j的功能係如圖7所示，具有4個功能。亦即，診斷美容、保養美容、生活美容、化妝美容的4個功能。診斷美容係可使用透過USB界面13而與智慧型手機3相連接的各種測定裝置(感測器)來進行各種測定。各測定裝置係可藉由連接於被輸入專用應用軟體5j的智慧型手機3的USB端子來利用。此外，可藉由更換各種類的測定裝置，來進行藉由各自不同的感測器所為之測定，主要可測定肌膚狀態。該各種測定裝置成為上述肌膚狀態測定裝置1。

此外，可將各種測定裝置的測定結果傳送至資料管理伺服器5來進行記憶，並且亦可由測定結果來分析肌膚狀態。

在保養美容中係可將各種肌膚保養裝置連接智慧型手機3來使用。藉由與智慧型手機3相連接，可留下使用履歷，藉由形成為可將智慧型手機3與資料管理伺服器5進行資料通訊的狀態，亦可進行各種肌膚保養裝置的控制。

相對於診斷美容主要以肌膚為對象，生活美容係以日常生活為對象，可將檢查紫外線量，或檢查口臭的機器連接在智慧型手機3的USB端子。化妝美容主要是進行有關化妝等的資訊提供者。

其中，圖7係顯示作為智慧型手機3的顯示手段的顯示畫面3a、3b、3c者，如後所述，顯示畫面3a係顯示主選單，顯示畫面3b係顯示由化妝選單所被選擇的診斷美容選單，顯示畫面3c係顯示由診斷美容選單所被選擇的肌膚診斷選單者。其中，肌膚診斷選單的BMI係指Body‧Mass‧Index的簡稱，以體重(kg)÷身高(m)÷身高(m)算出，表示肥滿程度者。此外，美白係由肌膚畫像所判定者，肌膚彈力、肌膚水分、肌膚油分係以具備有各自的測定用感測器的肌膚狀態測定裝置1所測定者。

在智慧型手機3的控制部32(運算處理裝置)所執行的肌膚狀態測定用的專用應用軟體5j係將如上所述使用作為肌膚狀態測定裝置1的智慧型手機3的數位攝影機31及透鏡模組所被攝像到的畫像資料22(肌膚畫像資料)記憶在快閃記憶體，而且輸出至網際網路4上的資料管理伺服器5。此外，具有作為分析結果顯示手段的功能，其係接收形成為分析由資料管理伺服器5所被傳送的例如測定資料的結果的分析結果資料，且顯示在智慧型手機3的顯示器。

此外，上述專用應用軟體5j係進行用以成為利用資料管理伺服器5的經營者所管理的表面狀態測定分 析資訊管理系統的會員(使用者)的使用者資料(個人資訊)的輸入亦即會員登錄、或進行對未包含使用者資料之中可特定個人的預定個人資訊的附帶資料的輸入亦即問卷調查的響應。

此外，專用應用軟體5j係以可閱覽如後所述被記憶在資料管理伺服器5的上述各使用者資料、測定資料、對測定資料的分析結果資料的方式進行要求。

此外，專用應用軟體5j係具有若所要求的資料由資料管理伺服器5接收到時，將該等資料顯示在顯示器的功能。

如圖1所示，資料管理伺服器5係具備有：用以基本上記憶上述使用者資料的使用者資料用資料庫51；用以記憶藉由肌膚狀態測定裝置1所得之測定資料的測定資料用資料庫52；用以由測定資料取得分析結果的資料分析用資料庫53；及立約者用資料庫54。

更詳言之，如圖3及圖4所示，資料管理伺服器5係具備有控制部5k，其係具有用以作為伺服器來發揮功能的CPU等。在該控制部5k中係進行各種處理，如後所述，具有：將所被攝影到的畫像資料22彼此相比較，辨識是否具有肌膚上的位置相重疊的部分之作為重疊感測手段的功能；及決定具有肌膚上的位置相重疊的部分的畫像資料22各自的相對位置之作為位置決定手段的功能。

此外，在資料管理伺服器5中，使用者資料 用資料庫51被分為複數個，以使用者資料用資料庫51而言，具備有：顧客(使用者)個人資訊管理資料庫5a、使用化妝品履歷資料庫5d、修整病歷資料庫5o。

此外，資料管理伺服器5係具備有：肌膚履歷資料庫(肌膚畫像記憶手段)5b、攝影點資料庫5c、詳細診斷結果資料庫5e，作為測定資料用資料庫52。

此外，資料管理伺服器5係具備有肌膚基準值資料庫5g作為資料分析用資料庫53。此外，資料管理伺服器5係具備有資料二次利用者存取權管理資料庫5h作為立約者用資料庫54。該資料二次利用者存取權管理資料庫5h係設定有利用者(立約者，例如化妝品公司等進行肌膚保養用品開發的公司)的顧客ID、利用者使用者ID及利用者密碼，藉此可進行資料二次利用者的認證。

此外，在資料二次利用者存取權管理資料庫5h係與利用者ID產生關連地登錄有利用者檢索級別及利用者存取級別的資料、及收取費用資訊。其中，收取費用資訊係資料二次利用者進行資料檢索或可存取資料的取得時的收取費用的資料，根據收取費用資訊，對利用者請求資料的使用費用。此外，使用費用係形成為依檢索級別及存取級別而異者，可檢索關鍵字(檢索項目)愈多，使用費用愈高，存取級別愈高，使用費用愈高。其中，依檢索級別可檢索項目受到限制，依存取級別可存取的資料受到限制，級別愈高，限制愈少。

此外，資料管理伺服器5係除了上述資料庫 51~54以外，具備有：以可以複數智慧型手機3任意使用1個肌膚狀態測定裝置1來加以利用的方式管理相同製品序列No.的裝置的機器資訊資料庫5i。其中，製品序列No.係可藉由預定的演算法來識別的方式所生成的文字列。藉由作為該文字列的序列No.，可判別是否為可在該表面狀態測定分析資訊管理系統中使用的肌膚狀態測定裝置1，而且在各肌膚狀態測定裝置1中為不同的獨特的文字列。

在機器資訊資料庫5i中，使上述各肌膚狀態測定裝置1的製品序列No.與顧客ID產生對應。如上所述進行序列No.的認證，若各肌膚狀態測定裝置1被認證時，與對應連接有各裝置的智慧型手機3的顧客ID產生關連地登錄被認證的序列No。此時，例如可以3人為止，亦即3台智慧型手機3共有一個肌膚狀態測定裝置1來使用。

此外，資料管理伺服器5係除了上述資料庫51~54以外，具備有：用以校正肌膚用攝影機(畫像資料22)的校正用資料庫5m、及登錄有市面銷售的各種化妝品的登錄化妝品資料庫5p。

在校正用資料庫5m，例如表12所示，以肌膚用攝影機，形成為在預定條件下的攝像，由測試圖表的畫像資料22，使明亮度的排名、3色配色的校正排名產生關連地予以登錄。

登錄化妝品資料庫5p係登錄有市面銷售的化 妝品的資料者，記憶有後述之化妝品分類、製造商名、品牌名(商品名)、容量、商品碼(JAN碼)等，並且登錄有價格、成分、推薦使用量(ml/1次)等依製造商所公開的製品資料。

如圖5的使用者資料用資料庫51的顧客個人資訊管理資料庫5a所示，顧客個人資訊管理資料庫5a係記憶有顧客ID、個人使用者ID、個人密碼、姓名、出生年月日、年齡、性別、住址1(國)、住址2(都道府縣)、住址3(市鎮村(區))、住址4(門牌號(大樓名稱房間號碼))、郵件位址、收取費用資訊(信用卡資訊等)，作為使用者使用智慧型手機3所輸入的資料。

其中，顧客ID係與個人的使用者ID相對應，而在資料管理伺服器5側被附加的ID，個人使用者ID係以使用者不會與其他使用者的個人使用者ID相重疊為條件來進行設定的ID。此外，個人密碼係配合個人使用者ID而被使用在使用者的認證。其中，使用顧客ID與個人使用者ID的二個ID，來作為在各使用者以1對1對應的ID，但是亦可以一個ID來兼用該等，亦可僅使用顧客ID，來作為使用者ID，亦可使用個人使用者ID來作為使用者ID。

但是，在該實施形態中，若在各資料庫記憶有與使用者相關連的資料時，全部以顧客ID進行管理，以顧客ID檢索分別記憶有與各使用者相關連的資料的各資料庫，藉此可將與各使用者相關連的資料全部檢索而取 得。因此，在顧客個人資訊管理資料庫5a中，亦與各顧客ID產生關連地登錄有各使用者的資料。其中，如上所述亦可使用顧客ID來取代個人使用者ID。

此外，如圖5所示，在顧客個人資訊管理資料庫5a係另外記憶由連接於智慧型手機3的肌膚狀態測定裝置1所被輸入的製品序列No.。其中，製品序列No.係在資料管理伺服器5被認證後予以記憶，若製品序列No.已被登錄在顧客個人資訊管理資料庫5a時，並不進行製品序列No.的認證。

如圖5所示，在使用化妝品履歷資料庫5d，與顧客ID產生關連地按各化妝品分類(種類)登錄有肌膚保養用品(化妝品)的履歷資料。其中，該履歷的資料係登錄使用者所購買的化妝品，透過智慧型手機3，登錄使用者所購買的化妝品(所使用的化妝品)的商品碼。該商品碼成為可特定化妝品的化妝品特定資訊。其中，在此係顯示使用在條碼所被使用的JAN(Japanese Article Number)碼來作為商品碼之例。

在使用化妝品履歷資料庫5d，如表5d1所示，登錄有履歷資料中表示各化妝品分類(種類)的編號、商品碼、使用開始日、及使用結束日。

表5d1係顯示化妝品分類為洗面乳的情形作為一例，登錄1作為洗面乳的商品分類的代碼，在商品碼附帶記憶有使用開始日、使用結束日。其中，若為使用中(未輸入使用結束時)，使用結束日並未被登錄。

此時，在智慧型手機3的顯示中，亦可根據登錄有化妝品資訊的登錄化妝品資料庫5p所登錄的資料，與各化妝品分類相對應而以下拉式選單等一覽顯示化妝品的商品名(+製造商名等)，由其中選擇要開始使用的化妝品。藉此，與登錄化妝品資料庫5p的化妝品名產生關連的商品碼被登錄在使用化妝品履歷資料庫5d，並且輸入日被登錄為使用開始日。同樣地，亦可由智慧型手機3的專用應用軟體5j，若有已結束使用的化妝品時，即指示使用者進行輸入。

此時亦可以下拉式選單等一覽顯示已開始使用的化妝品商品名等的資料，由使用者選擇已結束使用的化妝品商品名等。此時亦輸入所被選擇的化妝品商品碼，並且登錄輸入日作為使用結束日。其中，以使用化妝品的輸入方法而言，亦可輸入條碼，或輸入以關鍵字檢索來檢索登錄化妝品資料庫5p所被抽出的化妝品的資料。

此外，關於使用結束日，同一分類的化妝品新登錄在使用化妝品履歷資料庫5d時，亦可詢問使用者是否已結束使用登錄完畢的同一分類的化妝品，根據該回答來登錄該化妝品的使用結束日。或者，在登錄化妝品資料庫5p，按每種化妝品，登錄化妝品的容量(ml)及推薦使用量(ml/次)，在資料管理伺服器5或智慧型手機3，由使用開始日每日加算(積算)對1日的化妝品的使用次數乘算推薦使用量所得的值，並且與化妝品容量相比較，若被每日加算的值超過容量時，或超過容量的90%等容量的預定 比例時，專用應用軟體5j通知使用者正在使用的化妝品是否已用完、或者剩餘量是否變少，詢問使用者是否已結束使用，且根據該回答來登錄使用結束日。

此外，此時亦可顯示催促購買剩餘量變少的化妝品的訊息、或將化妝品的通訊銷售網站的剩餘量變少的商品的網頁URL顯示為連結該網頁的狀態。

此外，亦可與至今所使用的化妝品將用完、或剩餘量變少的情形相對應，進行介紹與剩餘量少的化妝品相同分類的其他化妝品的顯示。此時，亦可將該化妝品的製造商或銷售公司的該化妝品的網頁URL顯示為連結該網頁的狀態。

化妝品分類係如圖5的表5d2所示，例如洗面乳、卸粧乳、化妝水、乳液、乳霜、美容液、美白液、其他等，對該等各分類，對應有上述分類編號。其中，化妝品分類為一例，亦可進行不同分類的分法。

修整病歷資料庫5o係如圖5所示，與使用者的顧客ID產生關連，例如使用者任意登錄每天、早晚使用的化妝品者。在上述使用化妝品履歷資料庫5d中，係登錄化妝品的使用開始日及使用結束日，但是在修整病歷資料庫5o中，係可登錄每天、早晚使用的化妝品。在後述排程器功能之下，被輸入所使用的化妝品的資料，且傳送至資料管理伺服器5。

藉此，在修整病歷資料庫5o係被登錄顧客ID、日期及作為時間區間的早或晚、及例如上述商品碼作為使用化 妝品資料。

例如，如圖5的表5o1所示，在修整病歷資料庫5o中，係登錄日期及早或晚的時間區間、及所使用的化妝品商品碼。該商品碼係被登錄在使用化妝品履歷資料庫5d的化妝品被顯示在智慧型手機畫面上，可由所被顯示的化妝品，選擇輸入實際使用的化妝品。

在圖6所示之測定資料用資料庫52的肌膚履歷資料庫5b，與顧客ID、資料輸入日期時間、及資料No.產生關連地登錄由各肌膚狀態測定裝置1所被輸入的測定資料(輸入肌膚畫像、輸入蒸散計資料、輸入黑色素計資料)。此外，與該測定資料產生關連地登錄各簡易診斷(分析)結果的資料作為分析結果記憶手段。其中，在例如30分鐘以內等預定時間範圍內，由複數種肌膚狀態測定裝置1被輸入測定資料時，係進行總合簡易診斷，且登錄該總合簡易診斷的結果的資料。此外，若對測定資料進行詳細診斷時，在被通知詳細診斷的結果之後，在詳細診斷結果資料庫5e，與顧客ID及測定日期時間產生關連地登錄詳細診斷的結果的資料，在肌膚履歷資料庫5b係登錄對詳細診斷結果資料庫5e的該寫入資料的儲存位址。

其中，本說明書中所謂診斷的詞句並非為限定為醫療行為者，亦包含非醫療行為，在包含各種分析等的廣泛涵義下使用。

其中，簡易診斷係將例如預先蓄積的測定資料與作為診斷結果資料的肌膚狀態的排名預先產生對應地 登錄在肌膚基準值資料庫5g，在肌膚基準值資料庫5g，對作為測定結果的測定資料，由肌膚基準值資料庫5g的測定資料選擇近似的測定資料，將與該測定資料產生關連的排名輸出作為簡易診斷結果。該處理係藉由作為肌膚狀態分析手段的資料管理伺服器5的簡易診斷程式5f來進行。此外，如肌膚用攝影機般，若測定資料為畫像資料，將作為測定資料的畫像資料22二值化，根據藉由周知的畫像辨識所辨識到之經二值化的畫像資料22的型樣，來分析肌膚狀態。

其中，若使用肌膚用攝影機，以輸入肌膚畫像而言，如表5b1所示，係有以膚色光的LED照明所攝影到的皮膚紋理診斷用畫像、以白色光的LED照明所攝影到的雀斑診斷用畫像、及使用接近自然光的LED照明所攝像到的肌膚畫像、或以上述白色光或膚色光的LED進行攝影時藉由白色均衡(例如自動白色均衡)來重現顏色的肌膚畫像。肌膚畫像係在例如判定肌膚顏色(因日曬或暗沈等所造成的顏色差異)中使用。其中，在該實施形態中，肌膚顏色的判定係在詳細診斷中進行，在簡易診斷中並未進行。對前述3種類的肌膚畫像，分別登錄畫質資料，可在各智慧型手機3對應不同攝影機的畫質不同。

其中，在該畫質資料亦登錄各攝影時的顏色補正用資料，藉此亦可省略登錄畫質之校正用資料的校正用資料庫5m。

畫質資料係用以補正因使用智慧型手機3的 內置數位攝影機時的各智慧型手機3的機種的不同所造成的畫質的不同者。例如，在皮膚紋理診斷用畫像、雀斑診斷用畫像、肌膚畫像等的攝影，使用內置於智慧型手機3的數位攝影機31時，由於成為畫質依智慧型手機3的機種而異者，因此專用應用軟體5j將各智慧型手機3的每個機種的畫質資料傳送至肌膚履歷資料庫5b。在此，畫質資料係例如解析度。以解析度而言，係可為例如攝像元件的有效像素數，亦可為經攝影的畫像資料22的像素數。

此外，亦可為數位攝影機的攝像元件的尺寸與像素數。在診斷/分析時，將各畫像轉換成預先設定的診斷/分析項目的畫質資料來進行診斷/分析。例如，對於作為肌膚診斷對象的畫質資料，若肌膚畫像為低解析度，係藉由內插或超解析技術進行高解析化且進行診斷分析，相反地若為高解析度，係將像素進行抽減等來進行低解析化，且進行診斷分析。

此外，關於對肌膚履歷資料庫5b的登錄畫像，亦可按每個皮膚紋理診斷用畫像、雀斑診斷用畫像、肌膚畫像預先決定畫質，在送出來自使用者的畫像時，轉換成以智慧型手機3的專用應用軟體5j或資料管理伺服器5的程式而定的畫質，而登錄在肌膚履歷資料庫5b。此時以肌膚履歷資料庫5b的項目而言，畫質資料並非為必須。

此外，在肌膚履歷資料庫5b，藉由資料輸入 日期時間中內置於智慧型手機3的GPS所被測定到的位置資訊(測定地點)被登錄作為GPS資料。此外，由天氣資訊網站取得上述GPS的測定地點中的天氣資訊(氣象資料)來進行登錄。其中，資料輸入日期時間係進行肌膚之各測定的日期時間，亦可為記憶簡易診斷結果的日期時間。各項目的資料係藉由進行肌膚測定而被自動輸入。

測定條件旗標係例如GPS資料離平常的測定地點較遠時，例如在至前次為止的複數次測定中，在同縣或同市連續進行測定，相對於此，若由離預定距離以上的測定地點被輸入肌膚的測定資料時，對在該測定地點所被測定到的測定資料或簡易診斷結果設定旗標(測定條件旗標)。其中，除了測定地點以外，若天氣資訊中的氣溫或濕度與在預定範圍或輸入日期時間中的測定地點的平均氣溫或平均濕度的差超出預定範圍時，亦可在測定資料或簡易診斷結果設定旗標。

設定有該旗標的測定資料或簡易診斷結果係除了進行求出各資料平均等的統計處理的情形以外，例如設定有旗標的資料係未包含在進行統計處理時的母群體。亦即，若在離經常在的場所較遠的場所時、或氣象條件大幅不同時，由於會有環境條件大幅不同的情形，因此有測定結果成為異常值的可能性，為了防止異常值影響統計結果的情形，由統計處理的母群體中將設定有旗標的資料除外。

在肌膚畫像簡易診斷結果(表5b2)登錄有作為 如上所述所求出的皮膚紋理、雀斑、皺紋的簡易診斷結果的點數(排名)或偏差值。此外，由該等皮膚紋理、雀斑、皺紋的診斷結果、或肌膚畫像中的顏色(因乾燥或肌膚粗糙所造成的紅斑等)、或因異位性皮膚炎所致之濕疹的有無、或因乾燥所致之皮膚紋理混亂，來選擇肌膚類型。其中，肌膚類型係亦以詳細診斷來決定。

此外，詳細診斷係將測定資料在例如作為合作企業的化妝品公司伺服器(化妝品公司A伺服器61、化妝品公司B伺服器61)進行者，化妝品公司伺服器成為肌膚狀態分析手段。基本上，與簡易診斷同樣地，由將測定資料與分析結果資料產生關連的詳細診斷系統62所包含的資料庫，選擇近似在肌膚狀態測定裝置1所得之測定資料的測定資料，且輸出與該測定資料產生關連的分析結果資料者。但是，在詳細診斷中，例如所被登錄的測定資料數及分析結果資料比簡易診斷時更多，形成為在詳細診斷用的資料庫被更加細微分類的狀態，可得比簡易診斷更為詳細的分析結果。此外，亦可在詳細診斷用，以各化妝品公司獨自的演算法，選擇被登錄在資料庫的測定資料，可得與其相對應的分析結果。其中，在分析除了肌膚顏色以外的畫像資料22時，例如，將預定的臨限值為界進行二值化，藉由白與黑的面積比、或白或黑的型樣等來分析肌膚狀態。

化妝品公司伺服器係具備有：根據上述詳細診斷結果，決定推薦使用者的化妝品的推薦化妝品決定部 63；及根據詳細診斷結果，決定用以建議肌膚的保養方法、或有效於肌膚保養的保養用品等的建議內容的建議決定部64。

詳細診斷結果資料庫5e係將上述詳細診斷結果與顧客ID產生關連地進行登錄者，登錄進行詳細診斷之日亦即診斷日期時間(亦可包含請求詳細診斷的測定資料的測定日期時間)及詳細診斷結果的資料。此外，登錄有對應詳細診斷結果所選擇的建議的資料、或推薦化妝品(肌膚保養用品)的資料。

但是，在該表面狀態測定分析資訊管理系統及表面狀態測定分析資訊管理方法中，在使用肌膚畫像的分析中，可定期進行攝影來取得肌膚畫像，藉此得知肌膚狀態的經時變化。以經時變化的顯示方法而言，以輸出攝影畫像作為動態畫像或幻燈片播放較為有效。但是，為實現此，若在肌膚用攝影機、或智慧型手機3的數位攝影機安裝上述透鏡模組而將肌膚大致定期攝影時，難以必須按每個攝影對相同範圍進行攝影。

例如，若在智慧型手機3的內置數位攝影機安裝轉換鏡頭來進行攝影時，在攝影時難以自身觀看智慧型手機3的顯示器，例如難以藉由使用鏡子來觀看智慧型手機3的顯示器來特定肌膚狀的位置。

亦即，在肌膚並沒有成為肌膚上的位置基準的具特徵部分，即使在可清楚看到肌膚攝影位置的狀態下，亦無法判斷是否對與前次攝影的場所為相同的場所進 行攝影的可能性高。但是，對雀斑進行攝影時，以雀斑為基準，可每次對大致相同位置進行攝影的可能性變高，但是即使如此亦難以每次對相同位置進行攝影。

此外，在智慧型手機3以USB界面13等連接肌膚用攝影機時，使用USB線纜，使肌膚用攝影機相對智慧型手機3移動，因此可一邊直接觀看智慧型手機3的顯示器，一邊決定肌膚上的攝影位置，但是若沒有如上所述作為明確目標的特徵部分，難以每次對相同位置定期攝影。如上所述在智慧型手機3直接安裝肌膚透鏡的方式中，係更難以進行同一部分的攝影。

此外，若按每個攝影，肌膚上的攝影位置大幅偏移時，難以得知肌膚狀態的變化是因時間經過所造成的變化、還是因位置不同所造成的變化。在該實施形態中，以解決如上所示之問題的方法而言，若設定攝影點(point)，對該攝影點依序攝影時，藉由算出所被攝影到的畫像資料22的相對位置，可掌握畫像上的肌膚狀態不同是因時間經過所造成者、還是因位置不同所造成者，若提高肌膚狀態的分析精度，並且依攝影順序顯示畫像資料22作為幻燈片播放(動態畫像)時，根據各畫像資料22的相對位置來進行顯示，藉此在各幻燈片(畫格(frame))的畫面上的各部位顯示相同的肌膚的位置。亦即，在各幻燈片中，相同毛細孔(圖示於圖9、圖10)20係在任何幻燈片均被顯示在相同位置。

以下說明若決定成為上述攝影對象的肌膚的 攝影點，並且在該攝影點依序攝影複數畫像時，算出所被攝影到的各畫像資料22的相對位置的處理、及根據該相對位置進行畫像資料22的顯示的處理的概要。

在該表面狀態測定分析資訊管理系統中，當定期對被攝體進行攝影時，首先，若將被攝體設為臉部肌膚時，在臉部全體的畫像上設定表示肌膚上的攝影範圍的中心的攝影點，在攝影時等，例如圖8的智慧型手機3的顯示畫面3e、3f、3g所示，可在臉部全體的畫像上確認攝影點(在圖面上，包圍作為攝影枚數的數值的圓圈)。其中，臉部的畫像可為對實際使用者臉部進行攝影後的實際畫像，亦可為根據實際畫像而圖畫後的繪畫。或者，若臉部的畫像為繪畫時，亦可預先記憶複數種類臉部繪畫，由複數種臉部繪畫來選擇所使用的繪畫。

攝影點係將臉部畫像之將成為例如2個外眼角相連結的線段中央的點設為臉部全體座標系的原點位置，以XY座標系或極座標系顯示各攝影點的位置。在此係使用例如極座標系，將連結外眼角的線段作為座標的角度(偏角)的基準。其中，該臉部全體座標系係用以在臉部的畫像上顯示攝影點者。

若使用者在上述臉部畫像上藉由觸碰等來設定攝影點時，臉部全體座標系上的座標即被算出且記憶。使用者對所決定的攝影點進行攝影時，係在臉部畫像上指定根據上述座標所顯示的臉部全體座標系上的攝影點來進行攝影。

因此，使用者係在攝影時，在臉部畫像上確認攝影點，可在攝影時抑制攝影部位成為與攝影點分離的位置的情形。

在所被攝影的畫像資料22中，設定以畫像資料22上的中心位置為原點的極座標系，算出在畫像資料22所拍攝的毛細孔20的位置。其中，若使用正交座標系並且畫像資料22的畫像的形狀為矩形時，亦可將原點設為畫像左端的下端。

將在設定攝影點之後最初攝影到的畫像資料22的上述各毛細孔20的座標位置，作為與接下來指定相同的攝影點所被攝影的畫像資料22的毛細孔20的配置型樣的比較用的毛細孔資料來進行記憶。若輸入接下來被攝影的畫像資料22時，同樣地，算出以畫像資料22上的中心為原點的極座標系中的各毛細孔20的座標，作成登錄該等座標的毛細孔座標表。

其中，在該階段，毛細孔資料與毛細孔座標表係將各自的畫像資料22的中心為原點的毛細孔20的座標的表，但是毛細孔座標表為1個畫像資料22的毛細孔20的座標，相對於此，毛細孔資料係依序追加登錄已決定中心位置的畫像資料22的毛細孔20的座標。

基本上，如圖9所示最初被攝影到的畫像資料22(以符號21a為中心的畫像)、與接下來被攝影到的畫像資料22(以符號21b為中心的畫像)係即使有如箭號24所示之偏移，一部分區域相重疊的可能性高。藉此，在進 行比較的2個畫像資料22的毛細孔20的配置型樣係產生大致一致的部分。該毛細孔20的配置型樣相一致的部分為在2個畫像資料22相重疊的部分。此時，將最初被攝影到的畫像資料22設為基準畫像，設定以該基準畫像的中心為原點的攝影點座標系。其中，關於在最初被攝影到的畫像資料22、與接下來被攝影到的畫像資料22，沒有毛細孔20的配置型樣相一致的部分的情形，容後敘述。

如上所示與成為基準畫像的畫像資料22相重疊的畫像資料22的毛細孔20的座標係被轉換成上述攝影點座標系的座標，與被登錄在毛細孔資料的毛細孔20的座標不相重疊的毛細孔20的座標被追加在毛細孔資料。此外，求出攝影點座標系中的畫像資料22的中心位置21b的座標(畫像中心的位置座標)，決定畫像資料22的位置。其之後係在每次被輸入所被攝影到的畫像資料22時，即求出毛細孔座標表，與毛細孔資料相比較，若有毛細孔20的配置型樣相一致的部分，如上所述轉換毛細孔座標表的座標，並且追加登錄被轉換成毛細孔資料的毛細孔20的座標，並且決定畫像資料22的中心位置的攝影點座標系中的座標。

其中，在此係將畫像資料22中的畫像外形形成為圓形，但是亦可形成為矩形。此外，即使為一次被判定為在毛細孔座標表沒有毛細孔資料與毛細孔20的配置型樣相一致的部分的畫像資料22，亦有藉由在毛細孔資料追加登錄毛細孔20的座標，根據被追加登錄的毛細孔 資料，產生毛細孔20的配置型樣相一致的部分的可能性、因此，每次在毛細孔資料追加登錄毛細孔20的座標時，將原先沒有與毛細孔資料中的毛細孔20的配置型樣相一致的毛細孔20的配置型樣的畫像資料22的毛細孔座標表與毛細孔資料進行比較。此時，若有毛細孔20的配置型樣相一致的部分，將該畫像資料22的毛細孔20的座標如上所述進行座標轉換而追加登錄在毛細孔資料，並且決定該畫像資料22的畫像中心的位置座標。

若如上所示，為在相同攝影點被攝影到的畫像資料22且有毛細孔資料與毛細孔20的配置型樣相一致的部分的畫像資料22係被決定相對位置。亦即，如圖10所示、各畫像資料22係若有毛細孔資料中的毛細孔20的配置、與毛細孔20的配置相一致的部分，即決定攝影點座標系中的位置。藉此，得知各畫像資料22的攝影日期時間、及作為各畫像資料22的相對位置的畫像中心的位置座標，在分析肌膚狀態時，防止將明顯不同位置的肌膚狀態誤認為大致相同位置的肌膚狀態，可更加精度高地判定肌膚狀態。

在進行幻燈片播放的顯示時，例如若將以符號26所示之矩形範圍設為顯示畫像資料22的顯示畫面的位置時，可在該顯示畫面設定上述攝影點座標系，且使各畫像資料22顯示在其畫像中心為攝影點座標系所對應的座標。此時，相同的毛細孔20在不同的畫像資料22中亦被顯示在大致相同的位置。此時在各幻燈片會有畫像欠缺 的部分，但是被一次顯示的畫像係殘留至被覆寫為止，藉此在畫像欠缺的部分顯示之前的畫像資料22，形成為容易觀看的畫面顯示。

此時，例如將攝影機固定在三腳架等，在進行微速度攝影之後，形成為快轉再生的畫像。其中，亦可形成為根據前後的畫像資料22來內插各幻燈片的畫像欠缺部分者。

接著，說明在如上所述之相同攝影點對複數畫像進行攝影並且進行再生的處理所使用的各資料與各資料庫的關係。首先，按每個使用者可登錄的最大攝影點的數量(最大登錄攝影點數)係如圖5所示，在入會時被登錄在顧客個人資訊管理資料庫5a。其中，使用者可登錄的攝影點係例如免費會員與收費會員等般，形成為依會員種類可變更的設定，亦可例如免費會員可僅設定1個攝影點，收費會員可設定3個攝影點。此外，亦可發生依攝影點的數量而分別不同的收取費用。攝影點的數量可任意設定，亦可為依各種條件，決定使用者可利用的攝影點的數量。

決定攝影點所被攝影到的畫像資料22係如圖6所示，被登錄在肌膚履歷資料庫5b的輸入肌膚畫像的項目(表5b1)。其中，在畫像資料22係有皮膚紋理診斷用畫像、雀斑診斷用畫像、肌膚畫像，在求出畫像資料22的位置時，亦可形成為使用該等畫像資料22的種類的任一者，例如形成為使用肌膚畫像者。其中，在1個攝影點 的攝影時，由於上述皮膚紋理、雀斑、肌膚的3種類的畫像資料22被攝影，因此若決定1個種類的畫像資料22的位置(畫像中心的位置座標)，則其他種類的畫像資料22的畫像中心的位置座標亦會決定。

上述臉部全體座標系中的攝影點的座標係如圖6的表5b1所示，在肌膚履歷資料庫5b的輸入肌膚畫像的項目形成為攝影點(中心座標)，與各畫像相對應進行登錄，可檢索各畫像資料22是對哪一個攝影點進行攝影。

此外，由與同一攝影點的其他畫像資料22(肌膚畫像資料)的關連性，求出以各攝影點為目標所攝影到的各畫像資料22的中心位置，該各畫像資料22的中心位置形成為「畫像中心的位置座標」，且被登錄在肌膚履歷資料庫5b的輸入肌膚畫像的項目(表5b1)。藉此可知在相同攝影點被依序攝影到的畫像資料22的相對位置。

在此，「畫像中心的位置座標」的座標系並非為臉部全體座標系，針對該攝影點決定基準畫像時，形成為以基準畫像的中心為原點的上述攝影點座標系。若利用極座標，可將基準畫像的水平形成為角度的基準。此外，若決定各畫像資料22的位置時，形成為並不一定侷限於依攝影順序決定位置者。因此，對於畫像中心的位置座標已決定的畫像資料22，將位置決定旗標設為ON，在畫像中心的位置座標尚未決定的畫像資料22，則形成為位置決定旗標保持OFF。該位置決定旗標係被登錄在肌膚 履歷資料庫5b的輸入肌膚畫像的項目(表5b1)。其中，在對相同攝影點進行攝影的畫像資料22，除了上下左右的位置偏移之外，亦有旋轉方向的位置偏移，因此基本上基準畫像中的水平形成為座標的角度(偏角)的基準，其他畫像資料22係根據毛細孔資料與毛細孔20的配置型樣相一致的區域來決定畫像資料22的角度。

在攝影點資料庫5c係與顧客ID產生關連地記憶攝影點的登錄數(登錄攝影點數)。該攝影點的登錄數並非為上述最大值，而是在最大值的範圍內，使用者已經登錄的攝影點的數量，由0至最大值的任何值。

在攝影點資料庫5c中係與顧客ID產生關連，與被登錄的各攝影點相對應，攝影點的中心座標被登錄為臉部全體座標系的座標。此外，在攝影點資料庫5c係與攝影點的中心座標(臉部全體座標系)產生關連地登錄有：被登錄(攝影)的畫像資料的個數、登錄有攝影點的日期、基準畫像的資料No.、及上述毛細孔資料。基準畫像的資料No.係指在各測定資料測定時，形成為按每個作為各測定資料的畫像資料22附加而被登錄在肌膚履歷資料庫5b的資料No.之中的基準畫像的畫像資料22的資料No.。

毛細孔資料係與毛細孔座標表為相同的座標的表，表示該攝影點的攝影點座標系中的各畫像資料22的各毛細孔20的位置的座標係如圖6的表5b4所示，以極座標的向徑(radius vector)(rn)與偏角(θ n)予以登錄。其 中，如上所述在畫像資料22彼此，配置型樣相一致的毛細孔20係形成為相同的毛細孔20而被登錄座標。

接著，參照圖7及圖8與圖12的流程圖，說明有關攝影點的登錄的登錄攝影點的追加/變更處理。登錄攝影點的追加/變更處理係以智慧型手機3進行的處理，但是根據智慧型手機3中的登錄攝影點的追加/變更處理被追加或變更的攝影點的中心座標係被傳送至資料管理伺服器5，資料管理伺服器5在攝影點資料庫5c重新登錄經追加或變更的攝影點的中心座標。其中，在攝影點的變更中，係藉由一起進行攝影點的追加與攝影點的消去，取代被消去的攝影點而登錄被追加的攝影點。

如圖7所示，在智慧型手機3中，使專用應用軟體5j起動而使顯示畫面3a所示之主選單顯示時，在選項可選擇診斷美容，作為用以進行藉由肌膚狀態測定裝置1所為之測定的選項。選擇診斷美容，而使顯示畫面3b所示之診斷美容選單顯示。在診斷美容選單中，可選擇使用肌膚狀態測定裝置1的肌膚診斷，若選擇肌膚診斷，即顯示顯示畫面3c所示之肌膚診斷選單，可選擇肌膚診斷攝影機(肌膚用攝影機)作為肌膚狀態測定裝置1，或選擇肌膚診斷用攝影機，即顯示圖8的顯示畫面3d所示之攝影的種類選單，且可選擇攝影的種類。

攝影的種類在此有2種，可選擇持續肌膚攝影、及定點(pinpoint)攝影。持續肌膚攝影係在肌膚上設定攝影點，對被設定的攝影點定期攝影者。此外，在定點 攝影中，並未進行持續性的攝影，用以針對被攝影的肌膚畫像接受簡易診斷者。其中，簡易診斷係在持續肌膚攝影的情形下亦進行。在定點攝影中，係嘗試對肌膚在意部分進行攝影而接受簡易診斷者。此外，亦可利用在請使用者的朋友嘗試接受肌膚簡易診斷的情形。

在智慧型手機3中，判定在攝影種類選單中是否已被選擇出持續肌膚攝影(步驟S1)。

未選擇持續肌膚攝影，而選擇定點攝影時，接著以肌膚用攝影機對肌膚進行攝影，將所被攝影到的畫像資料22傳送至資料管理伺服器5而接受藉由畫像資料22所為之簡易診斷。

若持續肌膚攝影被選擇時，由資料管理伺服器5下載攝影點資料庫5c的資料，若有已經被登錄在攝影點資料庫5c的攝影點時，根據攝影點資料庫5c之所登錄的攝影點的中心座標、在該攝影點被攝影到的畫像個數、及該攝影點的登錄日，如圖8的顯示畫面3e所示，在臉部的畫像上顯示攝影點、攝影點的登錄日、及在攝影點的攝影張數，而且顯示登錄攝影點的追加/變更按鍵。亦即，作成且顯示顯示畫面3e(步驟S2)。其中，若攝影點未被登錄時，雖然顯示無攝影點的臉部的畫像，但是亦可形成為移至步驟S5者。

其中，如上所述在臉部的畫像上係設定有將連結2個外眼角的線段的中央的點作為原點的極座標系(臉部全體座標系)，在攝影點資料庫5c係記憶有臉部全體 座標系的極座標作為攝影點。

判定所被顯示的攝影點的1個是否被觸碰(步驟S3)。

若所被顯示的攝影點未被觸碰時，判定登錄攝影點的追加/變更按鍵是否已被觸碰(步驟S4)。

若所被顯示的攝影點被觸碰時，即結束該處理且顯示圖8的顯示畫面3g。在顯示畫面3g，係僅顯示在臉部的畫像上被觸碰的攝影點，催促對該攝影點進行攝影，且移至攝影處理。若登錄攝影點的追加/變更按鍵被觸碰時，係顯示圖8的顯示畫面3f(步驟S5)。

顯示畫面3f係基本上在與顯示畫面3e相同的畫像顯示催促新攝影點的輸入的顯示。以新攝影點的輸入而言，判定使用者是否已觸碰到顯示畫面3e上的臉部的畫像上(步驟S6)。

若被觸碰到時，求出被觸碰到的位置的上述臉部的畫像上的座標系的位置(臉部全體座標系)(步驟S7)。

此外，判定是否為設定有現狀攝影點的登錄數的上限值，例如3個(步驟S8)，若少於3個時，亦即若可重新登錄攝影點時，在已下載的攝影點資料庫5c中，設定新攝影點的項目，且在該攝影點的項目登錄攝影點的中心座標及今日的日期作為登錄日，且將被攝影到的肌膚畫像個數設為0(步驟S9)。

此外，將被改寫的攝影點資料庫5c傳送至資料管理伺服器5，並且作成根據被改寫的攝影點資料庫5c的顯 示畫面3e來顯示(步驟S10)，且返回至步驟S3。其中，在資料管理伺服器5，係以將攝影點資料庫5c置換成所接收到的攝影點資料庫5c的方式進行更新。

若為被設定現狀的攝影點的登錄數的上限值時，由於無法重新增加攝影點，因此顯示使使用者輸入指示要刪除的攝影點、或取消攝影點的輸入的顯示畫面(步驟S11)。

使用者係觸碰被顯示在與顯示畫面3f相同的顯示畫面的取消按鍵、或觸碰要刪除的攝影點，來進行指示。

在智慧型手機3係判定要刪除的攝影點是否已被觸碰(步驟S12)。

若攝影點未被觸碰時，係判定取消按鍵是否已被觸碰(步驟S13)。

若取消按鍵被觸碰到時，即顯示未顯示新攝影點的原本的顯示畫面3e而返回至步驟S3。

若攝影點被觸碰時，係根據被觸碰到的攝影點的座標、或例如1~3的攝影點的編號，由從資料管理伺服器5下載下來的攝影點資料庫5c刪除被觸碰到的攝影點的項目的資料(步驟S14)，且移至步驟S9，將之前被觸碰到的點作為新攝影點，如上所述登錄在攝影點資料庫5c且傳送至資料管理伺服器5。

在該處理中，係在步驟S3中，最終在這次要攝影的攝影點被觸碰到時，係如上所述結束處理而移至攝影處理。

在攝影處理中，係進行例如上述肌膚的皮膚紋理的攝影、肌膚的雀斑的攝影、及肌膚顏色的攝影，所被攝影到的畫像資料22係由智慧型手機3被傳送至資料管理伺服器5。

此時，由智慧型手機3，連同被攝影到的各畫像資料22(皮膚紋理診斷畫像、雀斑診斷畫像、肌膚畫像)一起傳送顧客ID、資料輸入日期時間(攝影日期時間)、GPS資料(測定地點)、各畫像資料22的畫質資料(例如攝影到的攝影機的解析度)、及攝影點的座標、位置決定旗標(OFF)，至資料管理伺服器5。

在接收到該等資料的資料管理伺服器5中，係將該等資料與顧客ID產生關連地登錄在肌膚履歷資料庫5b。其中，此時畫像中心的位置座標未被決定且未被登錄。位置決定旗標係保持為OFF。此外，根據各畫像資料22進行簡易診斷處理，將簡易診斷結果傳送至智慧型手機3，且使其顯示在智慧型手機3的顯示器。此外，簡易診斷結果係被登錄在肌膚履歷資料庫5b的肌膚畫像簡易診斷結果。

在智慧型手機3中，在肌膚攝影後，簡易診斷結果被顯示而形成為結束一連串處理的狀態，例如以專用應用軟體5j，在顯示出簡易診斷結果的狀態下，移至專用應用軟體5j的其他項目的顯示畫面，或結束專用應用軟體5j。

另一方面，在資料管理伺服器5中係當根據 持續肌膚攝影的畫像資料22被登錄時，係在上述簡易診斷結果結束傳送至智慧型手機3之後，進行畫像中心的位置座標決定處理。

以下參照圖13及圖14所示之流程圖，說明在資料管理伺服器5所進行的畫像中心的位置座標決定處理。

如上所述由智慧型手機3進行收訊而被登錄在肌膚履歷資料庫5b的輸入肌膚畫像的項目(表5b1)，使用肌膚(皮膚紋理、雀斑、顏色)的畫像資料22，藉由畫像辨識，分析毛細孔20的位置，求出例如以畫像資料22的畫像的中心為原點的極座標系中的各毛細孔20的座標，作成登錄有該等毛細孔20的座標的毛細孔座標表(步驟S21)。

例如，被攝影到的畫像資料22係由智慧型手機3被傳送至資料管理伺服器5，在資料管理伺服器5中，使用所接收到的畫像資料22來進行簡易診斷。之後畫像資料22上的毛細孔20的位置被檢測。毛細孔20的位置檢測係藉由檢測比毛細孔20更容易辨識的肌膚上的毛(汗毛)來進行。被辨識到的毛的端部係前端側細，在毛細孔20側亦即基端側粗。

因此，可將被辨識到的毛粗側的端部辨識為毛細孔20。其中，在未長毛的狀態下正常閉合的狀態的毛細孔20係變得難以辨識，因此在此係辨識長毛的毛細孔20的毛的基端部，且將其作為毛細孔20。

其中，即使未長毛亦呈打開狀態的毛細孔20 若與閉合的毛細孔20相比較，較容易辨識，辨識打開的毛細孔20(僅辨識可辨識的毛細孔20)，亦可形成為與長毛的毛細孔20同樣地決定座標上的位置者。其中，肌膚上的毛細孔20的配列係大致具規則性，若使其辨識所有毛細孔20而記憶位置時，亦會有難以形成畫像上的特徵點之虞，藉由僅辨識長毛的毛細孔20或打開的毛細孔20，在毛細孔20的配置型樣容易產生差異，由毛細孔20的型樣，容易特定各肌膚畫像相重疊的部分。亦可將為預定的直徑以下的大小且色素部分沈著的部分(相對周圍的顏色，顏色變深的部分)的中心辨識為毛細孔20。此外，亦會有在毛細孔20部分滯留黑色素而產生較小雀斑的情形，亦可將預定尺寸以下的雀斑辨識為毛細孔20者。

接著，判定是否為所被選擇的攝影點中的第一次攝影(步驟S22)。亦即，判定攝影點資料庫5c中被選擇的攝影點的畫像個數是否為1。

若為第一次攝影，將毛細孔座標表登錄在攝影點資料庫5c所對應的攝影點的毛細孔資料(步驟S23)。此時，位置決定旗標係保持OFF。毛細孔資料係用以特定各畫像資料22的位置所使用的毛細孔20的座標表。毛細孔資料中的各毛細孔20的座標係以上述基準畫像的中心位置為原點的攝影點座標系的座標。但是，在此並未決定基準畫像，而且沒有位置已被決定的畫像資料22的狀態，將登錄有假設以第一次攝影的畫像資料22的中心為原點的座標系的毛細孔20的座標的毛細孔座標表作為毛 細孔資料，登錄在攝影點資料庫5c所對應的攝影點。若為第一次攝影，由於沒有與毛細孔資料相比較的毛細孔座標表，因此結束處理。

在步驟S22中，若判定出並非為被選擇的攝影點中的第一次攝影時，亦即若攝影點資料庫5c中被選擇的攝影點的畫像個數為2以上時，判定是否有與所被作成的毛細孔座標表的毛細孔20的配置型樣、及毛細孔資料的毛細孔20的配置型樣相一致的部分(步驟S24)。此時係藉由預定的畫像辨識演算法，判定在2個畫像資料22中是否有毛細孔20的配置型樣大致一致的部分。

例如，以毛細孔資料、及毛細孔座標表，判定是否有毛細孔20的配置型樣類似的部分，判斷在該等2個畫像資料22係有對肌膚上的相同範圍進行攝影的部分(肌膚畫像彼此相重疊的部分(成為相同的部分))。在該判定中亦考慮到因根據肌膚攝影機對皮膚的按壓力的不同的皮膚表面鼓起所造成的毛細孔座標的變化、因攝影環境不同所造成之可辨識的毛細孔20的變化等，以容許值以上的一致率，判斷同一配置型樣的存在。

接著，判定在經比較的毛細孔資料、與毛細孔座標表是否有毛細孔20的配置型樣相一致的區域(步驟S25)。若在毛細孔資料、與毛細孔座標表沒有毛細孔20的配置型樣相一致的區域時，判定是否已經決定基準畫像(步驟S26)。此時係參照攝影點資料庫5c的攝影點的基準畫像的項目來進行判斷，但是亦可判定在與攝影點相對應 的畫像資料22中，是否有位置決定旗標形成為ON的畫像資料22。若未決定基準畫像時，移至步驟S23，將所作成的毛細孔座標表作為毛細孔資料而登錄在攝影點資料庫5c。此時係消去之前的毛細孔資料而將毛細孔資料進行更新記憶。

亦即，在之前被攝影到的畫像資料22的毛細孔座標資料亦即毛細孔資料、與接下來被攝影到的畫像資料22的毛細孔座標資料，至發現毛細孔型樣相一致的區域為止，在每次接收畫像資料22時，將所作成的毛細孔座標表作為毛細孔資料來進行更新記憶。此時由於尚未決定畫像資料22的相對位置，因此對應的位置決定旗標係保持OFF而結束處理。

若在步驟S26中被判定為已經決定基準畫像時，將與該畫像資料22相對應的肌膚履歷資料庫5b的輸入肌膚畫像的項目的位置決定旗標保持OFF(步驟S27)，跳至步驟S33移至未定義畫像的位置決定處理。

在步驟S25中，若在經比較的毛細孔資料、與毛細孔座標表有毛細孔20的配置型樣相一致的區域時，判定是否已經決定基準畫像(步驟S28)。該判定方法係如前所述。若未決定基準畫像資料22時，將在這次被接收且作成有毛細孔座標資料之在該攝影點的第N個畫像資料之前接收而登錄有毛細孔資料的第N-1個畫像資料22作為基準畫像，將與在該攝影點的第N-1個畫像相對應的資料No.登錄在相對應的攝影點資料庫5c的攝影點的 基準畫像的項目(步驟S29)。此時係將一個之前所攝影到的第N-1個畫像資料22的位置決定旗標設為ON，並且將作為毛細孔資料中所使用的毛細孔20的座標的座標系的攝影點座標系的原點決定為基準畫像所決定的畫像資料22的畫像中心。

其中，此時所被記憶的毛細孔資料係與以第N-1個畫像資料22的中心為原點的毛細孔座標表中的座標系的座標為相同的資料，毛細孔資料係形成為照原樣的狀態。

在步驟S28中被判定為已決定基準畫像時，或進行步驟S29的處理時，將具有毛細孔資料與毛細孔20的配置型樣相一致的區域的本次的攝影畫像亦即第N個畫像資料22的畫像中心的座標，轉換成攝影點座標系的座標。將攝影點座標系中的該第N個畫像資料22的畫像中心的座標，登錄在肌膚履歷資料庫5b的輸入肌膚畫像(表5b1)。此外，將肌膚履歷資料庫5b的輸入肌膚畫像(表5b1)的位置決定旗標設為ON(步驟S30)。藉此決定皮膚紋理、雀斑、肌膚的第N個畫像資料22的畫像中心的攝影點座標系中的位置。

接著，將如上所述決定出畫像中心的第N個畫像資料22的各毛細孔20的座標，轉換成攝影點座標系的座標系(將基準畫像的中心作為原點)(步驟S31)。亦即，將所被作成的毛細孔座標表的座標的座標系的原點亦即畫像資料22的畫像中心，以形成為攝影點座標系的畫 像中心的座標的方式進行座標轉換。藉此，畫像資料22上的各毛細孔20的座標形成為與毛細孔資料中的毛細孔20的座標為相同的攝影點座標系的座標。

接著，將如上所述被轉換成攝影點座標系的座標的第N個畫像資料22的毛細孔20的座標，追加登錄在毛細孔資料(步驟S32)。此時，如上所述毛細孔資料的毛細孔20與配置型樣相一致的毛細孔20的座標係已經被登錄在毛細孔資料，因此將配置型樣原來不相一致的毛細孔20的座標追加登錄在毛細孔資料。

接著，進行未定義畫像的位置決定處理(步驟S33之後的處理)。將肌膚履歷資料庫5b的輸入肌膚畫像(表5b1)的位置決定旗標形成為OFF的畫像資料22全部選擇(步驟S33)。接著在被選擇的位置決定旗標形成為OFF的各畫像資料進行以下處理。該處理係按每個位置決定旗標形成為OFF的畫像資料形成為迴圈處理來進行，位置決定旗標形成為OFF的畫像資料1個1個地進行相同處理。

在此係將位置決定旗標為OFF的畫像資料的數設為n，在至第1~n個為止的畫像資料分別進行處理。此外，形成為i=1~n，開始依序處理第i個畫像資料的迴圈處理(步驟S34)。其中，若沒有位置決定旗標為OFF的畫像資料時，即結束處理。

作成該等被選擇的畫像資料22之中第i個畫像資料22所對應的毛細孔座標表，且與被記錄在攝影點 資料庫5c的該攝影點的毛細孔資料相比較(步驟S35)。在此係藉由上述毛細孔資料的追加登錄，毛細孔資料中的毛細孔20的座標增加，即使為到現在沒有毛細孔資料與毛細孔20的配置型樣相一致的區域的畫像資料的毛細孔座標表，亦產生有毛細孔資料與毛細孔20的配置型樣相一致的區域的可能性。

經比較的結果，判定是否有具有毛細孔資料與毛細孔20的配置型樣相一致的區域的毛細孔座標表(毛細孔的配置型樣是否局部相一致)(步驟S36)，若有，求出與該毛細孔座標表相對應的畫像資料22的畫像中心的攝影點座標系中的座標，登錄在肌膚履歷資料庫5b，並且將肌膚履歷資料庫5b的位置決定旗標設為ON(步驟S37)。

接著，將第i個畫像資料的毛細孔的座標表轉換成基準畫像的座標系，亦即攝影點座標系。亦即，轉換成與毛細孔資料中的各毛細孔的位置的座標為相同的座標系(步驟S38)。將經轉換的第i個畫像資料22的毛細孔座標表的座標，追加登錄在攝影點資料庫5c所對應的攝影點的項目的毛細孔資料(步驟S39)。在i加算1而反覆從步驟S34開始的迴圈處理(步驟S40)。但是，若形成為i=n之後，再進行步驟S35至步驟S39的處理時，即結束處理。

其中，該處理係在資料管理伺服器5側而非為智慧型手機3進行，因此可在有別於智慧型手機側的處 理的其他背景下執行。因此，亦可至發現有互相重疊的區域的2個以上的畫像資料22為止，在每次輸入透過使用者的智慧型手機3所攝影到的畫像資料22時，將已經記憶且未決定位置的所有畫像資料22所對應的毛細孔座標表、與新輸入的畫像資料22的毛細孔座標表進行比較。

如上所示，根據毛細孔資料，若發現具有互相重疊的部分的畫像資料22時，可在相同座標系上的位置表示該等畫像資料22上的毛細孔20。以座標系而言，係使用上述攝影點座標系，且決定各畫像的畫像中心的位置為座標。此外，毛細孔20的座標係被轉換成攝影點座標系的座標而予以統一，且被登錄在毛細孔資料。該座標轉換係考慮到因根據肌膚攝影機對皮膚的按壓力的不同的皮膚表面鼓起所造成的毛細孔座標的變化來進行轉換。具體而言，形成為畫像以畫像中心為基準而放大/縮小者，例如若為極座標，即進行對向徑r乘算倍率的處理。

如上所示在被特定出互相的相對位置的畫像資料22中，可掌握因位置不同所造成的肌膚狀態不同。例如，若為沒有位置資訊的畫像資料22，會有發生拍攝到部分肌膚粗糙的畫像資料22、及因位置偏移而未拍攝到肌膚粗糙的畫像資料22之虞。

此時，有看起來肌膚粗糙像突然發生、或看起來肌膚粗糙像突然治好的可能性，形成為肌膚狀態的經時變化極為難以得知的狀態。

相對於此，在該實施形態中，由於可掌握各畫像資料 22所示之肌膚位置的不同，因此例如若在部分畫像資料22僅拍攝到肌膚粗糙時，可僅由拍攝到肌膚粗糙的畫像資料22，觀察肌膚粗糙的經時變化。因此，可減少觀看未拍攝到肌膚粗糙的畫像資料22而判斷肌膚粗糙為良好的錯誤。亦即，可更加精度高地判定肌膚狀態的經時變化。

此時若對作為立約者用戶端6的化妝品公司等之合作公司的電腦系統提供資料時，被提供在合作公司容易使用的資料，且可提供合作公司想要的資料。藉此，有增加作為合作公司的契約、或擴大收費資料的使用量的可能性。

此外，若詳細診斷畫像資料22時，不會形成為反覆肌膚粗糙消失或發生的顯示，可詳細分析以一定程度長期間觀察肌膚狀態的結果，可進行更為詳細的肌膚診斷。

此外，可將被登錄作為該等履歷的畫像資料22顯示在智慧型手機3的顯示器，但是此時亦在顯示畫面上設定攝影點用座標系，在該座標系上，以各畫像資料22的畫像中心的座標位置形成為被登錄在肌膚履歷資料庫5b的畫像中心的座標位置的方式予以顯示。

接著，參照圖15的流程圖及圖10，說明用以使上述畫像資料22顯示在智慧型手機3的顯示畫面的肌膚畫像的顯示處理。

在圖10中係在攝影點座標系的座標上顯示有應顯示 的畫像資料22。亦即，根據位置決定旗標成為ON的畫像資料22的畫像中心的座標，在攝影點座標上配置各畫像資料22的狀態。位置決定旗標為OFF的畫像資料22並未被顯示。各畫像資料22係依登錄順序被顯示為幻燈片播放，但是所被顯示的畫像資料22係如圖10所示顯示被設定在攝影點座標系上的畫面顯示對象範圍(顯示範圍26：對應智慧型手機3的顯示器)的部分。

換言之，藉由在攝影點座標上設定顯示範圍26，顯示範圍26中的各像素的位置係可以攝影點座標的座標表示，形成為在顯示範圍26設定有攝影點座標的狀態。

被配置在該顯示範圍26內的畫像資料22依登錄順序與畫像中心的座標位置相對應被顯示為幻燈片播放。

此時係如圖15的流程圖所示，輸入使畫像資料22顯示的攝影點、全部畫像資料22之中所顯示的畫像資料22的登錄日的期間、及作為幻燈片播放而顯示時的畫像資料22的顯示間隔(步驟S41)。例如，若攝影點有3個時，選擇其中的1個攝影點來進行輸入。此外，輸入所顯示的畫像資料22的登錄日的期間，如從去年1月1日至今年1月1日等、或至今天為止的一年份等。藉此，在所被指定的期間內所登錄的畫像資料22即成為顯示的對稱。

此外，幻燈片播放的顯示間隔係當依序顯示各畫像資料22時，從顯示之前的畫像資料22之後、至顯 示接下來的畫像資料22為止的間隔，若縮短該間隔，即形成為如動態畫像般的顯示。

由成為顯示對象的畫像資料22來決定作為畫面顯示對象範圍(座標)的顯示範圍26(步驟S42)。例如，根據決定位置的畫像資料22的畫像中心的座標位置，設定顯示範圍26作為成為顯示對象的畫像資料22。此時將包含畫像中心最為密集的範圍、或畫像資料22最多重疊的部分的範圍形成為顯示範圍26。其中，亦可形成為可設定顯示範圍26內的各畫像資料22的顯示倍率。

接著，在攝影點座標上，以各畫像資料22的畫像中心被配置在該畫像中心的座標上的方式，依登錄順序將畫像資料22覆寫而顯示(步驟S43)。

其中，畫像資料22t若其一部分區域與顯示範圍26相重疊，即使畫像中心未進入至顯示範圍26亦被顯示。其中，該處理亦可以例如智慧型手機3進行，但是在以智慧型手機3進行步驟S41的輸入處理之後，將被輸入的資料傳送至資料管理伺服器5，在資料管理伺服器5中作成顯示範圍26內的顯示用資料後，將所作成的顯示用資料傳送至智慧型手機3，在智慧型手機3將顯示用資料顯示在顯示器。

此時，根據所被攝影到的實際肌膚上的相對位置，依攝影順序(登錄順序)顯示畫像資料22。因此，在顯示畫面的相同座標位置，基本上顯示肌膚上相同座標位置(相對座標)的畫像資料22，因此在顯示中不會形成為例 如黑痣在畫面上下左右移動的狀態，黑痣係在大致停止在顯示畫面上的大致相同位置的狀態下被顯示。因此，未對應經過部分時間，而有殘留舊畫像而被顯示之虞，但是肌膚狀態的變化被快轉觀看。

圖18係顯示根據前述圖15的流程圖，以時間序列顯示肌膚畫像在智慧型手機3的顯示畫面的途中的智慧型手機3的顯示畫面。在圖18中，在顯示畫面係在肌膚畫像的顯示區域及其上方存在日期時間及點數的顯示區域。在日期時間與點數的顯示區域係顯示與覆寫在肌膚畫像的顯示區域的畫像資料相對應的攝影日期時間與肌膚畫像簡易診斷結果的皮膚紋理點數或雀斑點數。

接著，參照圖16及圖17的流程圖、及圖11，說明其他畫像資料22的顯示處理方法。在上述顯示處理方法中，係顯示畫像資料22作為各幻燈片(畫格)，但是各幻燈片的畫像資料22以外的部分係使之前的幻燈片無須改寫地顯示。亦即，各幻燈片的畫像資料22以外的部分係形成為透明的狀態來處理，在沒有1個幻燈片的畫像資料22的部分係保持未改寫之前的顯示地被顯示。

相對於此，在該顯示方法中，在各幻燈片具有畫像資料22的區域係配置畫像資料22，不具畫像資料22的區域係由前後的畫像資料22，藉由內插作成畫像資料22予以配置。因此，此時，各幻燈片係由畫像資料22、及被內插的畫像資料所構成。

在顯示處理中，步驟S51與上述步驟S41同 樣地進行，步驟S52與上述步驟S42同樣地進行。接著，由適當的畫像資料、及藉由其前後的畫像資料被內插的畫像資料，來作成形成為與決定出在所被輸入的登錄日的期間內的位置的畫像資料22各自相對應而顯示在智慧型手機3的顯示器的幻燈片(畫格)的畫面資料(步驟S53)。其中，作成畫面資料的處理容後敘述。

接著，依該畫面資料所包含的畫像資料的登錄日由舊到新的順序，顯示以上述被輸入的顯示間隔所作成的畫面資料(步驟S54)。此時如上述顯示處理所示並沒有舊的畫像資料到什麼時候均被顯示之虞，由於沒有在被顯示在顯示畫面上的各幻燈片沒有畫像資料的部分，因此形成為更容易觀看的幻燈片播放(動態畫像的顯示)。其中，顯示處理係以智慧型手機3進行，但是作成畫面資料的處理係在資料管理伺服器5進行，所被作成的畫面資料被傳送至智慧型手機3。

如圖17的流程圖及圖11(a)、(b)所示，當作成包含第N個畫像資料22的第N個畫面資料41時，辨識畫面資料41之不具畫像資料22的非攝影區域來進行決定(步驟S61)。實際上，在已設定攝影點座標的幻燈片(畫面資料41)上與中心位置的座標對應配置畫像資料22，將所配置的畫像資料22以外的區域設為非攝影區域。其中，在此，第N-1個畫面資料40係形為已經被作成者。其中，第N-1個畫面資料40的作成方法係與第N個畫面資料的作成方法相同，依照畫像資料22的登錄順序，依 序根據畫像資料22，作成畫面資料40、41、42。

接著，在進行畫面資料41之中不具第N個畫像資料22a的非攝影區域的內插時，係使用：已作成的第N-1個畫面資料40、及第N+1個之後的畫像資料22之中與非攝影區域相重疊的畫像資料22b、22c。其中，在此，畫像資料22b、22c係例如第N+1個畫像資料22b、及第N+2個畫像資料22c，但是亦有成為其之後的畫像資料22的可能性。亦即，由第N-1個畫面資料40、及第N+1個之後的畫像資料22之中與非攝影區域相重疊的畫像資料22b、22c，藉由使用第N個畫面資料41的內插處理，作成非攝影區域的畫像(步驟S62)，將第N個畫像資料22a與被內插的畫像資料22進行合成而作成第N個畫面資料41(步驟S63)。其中，內插處理係可使用周知的演算法。

在作成第N個畫面資料41之後，即作成第N+1個畫面資料42，因此將第N+1個畫面作為第N個(步驟S64)，若有尚未處理的畫像資料22時(步驟S65)，即返回至步驟S61。其中，若作成如上所述在所被選擇的期間所登錄的畫像資料22所對應的畫面資料40、41、42，即結束作成畫面資料40、41、42的處理。

在該顯示處理方法中，亦可如圖18所示，在智慧型手機3的顯示畫面係在肌膚畫像的顯示區域及其上方設置日期時間及點數的顯示區域，且在肌膚畫像的顯示區域顯示與顯示中的畫面資料相對應的畫像資料的攝影日 期時間與肌膚畫像簡易診斷結果的皮膚紋理點數或雀斑點數。

其中，在該實施形態中，係使用毛細孔20的座標位置，作為畫像資料22的肌膚上的位置相重疊的部分的畫像辨識上的特徵部分，但是除此之外，亦可使用毛細孔20的形狀作為畫像辨識上的特徵者。例如，以毛細孔20的形狀而言，將毛細孔20的面積、或毛細孔20的直徑作為特徵部分，在觀看毛細孔20的配置時，分為例如大的毛細孔20、及小的毛細孔20，若小的毛細孔20與大的毛細孔20的位置相一致時，亦可形成為不認為位置相一致者。藉此，由於毛細孔20的配置型樣相似，因此可減少實際上肌膚上的位置不相重疊卻被誤辨識為相重疊的比例。

此外，以用以找到畫像資料22彼此的重疊區域的畫像辨識上的特徵部分而言，亦可形成為使用雀斑的形狀者。此時，例如在雀斑的畫像資料22中，決定臨限值，形成為二值化成顏色淺的部分與顏色深的部分而可輕易辨識雀斑形狀的狀態，亦即抽出雀斑形狀的狀態，在2個畫像資料22中，將顏色淺的部分彼此或顏色深的部分彼此的形狀進行比較，若有形狀近似的部分時，亦可形成為判定有相一致的區域，且決定2個畫像資料22的相對位置者。

此外，亦可形成為在將肌膚攝影機配置在肌膚上的相同位置的狀態下，若進行雀斑畫像、皮膚紋理畫 像、肌膚畫像的攝影，在肌膚畫像，藉由毛細孔20的配置，求出畫像資料22的畫像中心的位置座標時，將該畫像中心的位置座標適用於在與肌膚畫像相同的位置被攝影到的皮膚紋理畫像或雀斑畫像者。此外，亦可使用皮膚紋理畫像或雀斑畫像，藉由毛細孔20的配置，來求出畫像資料22的畫像中心的位置座標。此外，同樣地，將雀斑的形狀作為畫像辨識的特徵部分，若求出雀斑畫像的畫像中心的位置座標時，亦可將該畫像中心的位置座標適用於在與雀斑畫像為相同的位置被攝影到的皮膚紋理畫像或肌膚畫像。在本說明書中，係使用簡易診斷/詳細診斷的詞句，但是該等詞句並非侷限於醫生所為之診斷，為亦包含在寬廣涵義下的判定的概念。

Claims (18)

1. 一種表面狀態測定分析資訊管理系統，其特徵為：具備有：攝影手段，其係無須固定攝影位置，對成為測定對象的表面進行攝影而生成畫像資料；畫像記憶手段，其係記憶前述畫像資料及該畫像資料的攝影日；及位置決定手段，其係隔著期間，藉由前述攝影手段進行複數次攝影，藉此成為攝影對象的前述表面上的攝影位置偏移的複數前述畫像資料被記憶在前述畫像記憶手段時，將被記憶在前述畫像記憶手段的複數前述畫像資料進行比較，決定複數前述畫像資料的一個座標系中的相對位置，可將決定出前述座標系的相對位置的各畫像資料，依攝影日順序配置在前述座標系的相對位置進行顯示。
2. 如申請專利範圍第1項之表面狀態測定分析資訊管理系統，其中，具備有畫像顯示手段，其係將被記憶在前述畫像記憶手段的前述畫像資料，依前述畫像資料的前述攝影日順序進行顯示，前述畫像顯示手段係在顯示畫面上設定前述座標系，將決定出前述座標系的位置的各畫像資料配置在前述座標系的位置而依前述攝影日順序進行顯示。
3. 如申請專利範圍第2項之表面狀態測定分析資訊管理系統，其中，前述畫像顯示手段係將前述畫像資料以前 述攝影日順序顯示在最前面，且保持在顯示出與比被顯示在最前面的該畫像資料為更前被顯示的前述畫像資料的最前面所顯示的該畫像資料不相重疊的部分的狀態。
4. 如申請專利範圍第2項之表面狀態測定分析資訊管理系統，其中，前述畫像顯示手段係當依前述攝影日順序顯示前述畫像資料時，在顯示該畫像資料的顯示範圍係包含：具有被顯示的該畫像資料的部分、及沒有該畫像資料的部分，在沒有該畫像資料的部分，若有相較於被顯示的該畫像資料，前述攝影日為更前或更後的前述畫像資料時，由前述攝影日為更前或更後的前述畫像資料生成被內插的畫像資料，在被顯示在前述顯示範圍的沒有前述畫像資料的部分顯示被內插的前述畫像資料。
5. 如申請專利範圍第1項之表面狀態測定分析資訊管理系統，其中，前述位置決定手段係若在互相比較的前述畫像資料有大致一致的畫像區域時，根據前述畫像區域，決定複數前述畫像資料的一個前述座標系中的相對位置。
6. 如申請專利範圍第5項之表面狀態測定分析資訊管理系統，其中，具備有：重疊感測手段，其係將依序被記憶在前述畫像記憶手段的前述畫像資料彼此進行比較，判定在前述畫像資料彼此是否有互相大致一致的前述畫像區域，前述位置決定手段係若有互相大致一致的前述畫像區域時，設定以其中一方前述畫像資料為基準的前述座標系，決定將互相大致一致的前述畫像區域與該其中一方前 述畫像資料相重疊的狀態的另一方前述畫像資料的前述座標系中的位置，前述重疊感測手段係將藉由前述位置決定手段已決定出前述座標系的位置的前述畫像資料、及尚未決定出前述座標系的位置的前述畫像資料進行比較，來判定是否有互相大致一致的前述畫像區域，前述位置決定手段係對於已決定出前述座標系的位置的前述畫像資料，若有具有大致一致的前述畫像區域的前述座標系的位置未決定的前述畫像資料時，根據將決定出前述座標系的位置的前述畫像資料、與未決定出前述座標系的位置的前述畫像資料，以互相大致一致的前述畫像區域互相重疊的方式進行配置時的前述畫像資料彼此的彼此位置關係，決定未決定出前述座標系的位置的前述畫像資料的前述座標系的位置。
7. 如申請專利範圍第6項之表面狀態測定分析資訊管理系統，其中，前述重疊感測手段係當判定在前述畫像資料彼此是否有互相大致一致的前述畫像區域時，抽出與被前述畫像資料的前述攝影手段所攝影到的對象物的種類相對應的特徵點的位置，將每個前述畫像資料的前述特徵點的配置型樣相比較，若前述特徵點的配置型樣有大致一致的部分時，即判定為具有互相大致一致的前述畫像區域。
8. 如申請專利範圍第7項之表面狀態測定分析資訊管理系統，其中，被形成為前述攝影手段的前述攝影對象的前述表面被設為肌膚的表面， 藉由前述重疊感測手段，由前述畫像資料被抽出的前述特徵點為前述肌膚表面上的各毛細孔的預定部位。
9. 如申請專利範圍第7項之表面狀態測定分析資訊管理系統，其中，被形成為前述攝影手段的前述攝影對象的前述表面係被設為肌膚的表面，藉由前述重疊感測手段，由前述畫像資料所抽出的前述特徵點為前述肌膚表面上的預定尺寸以下的各雀斑的預定部位。
10. 一種表面狀態測定分析資訊管理方法，其係在表面狀態測定分析資訊管理系統所進行的表面狀態測定分析資訊管理方法，該表面狀態測定分析資訊管理系統具備有：攝影手段，其係無須固定攝影位置，對成為測定對象的表面進行攝影而生成畫像資料；及畫像記憶手段，其係記憶前述畫像資料及該畫像資料的攝影日，該表面狀態測定分析資訊管理方法之特徵為：具備有：位置決定步驟，其係隔著期間，藉由前述攝影手段進行複數次攝影，藉此成為攝影對象的前述表面上的攝影位置偏移的複數前述畫像資料被記憶在前述畫像記憶手段時，將被記憶在前述畫像記憶手段的複數前述畫像資料進行比較，決定複數前述畫像資料的一個座標系中的相對位置，可將決定出前述座標系的相對位置的各畫像資料，依 攝影日順序配置在前述座標系的相對位置進行顯示。
11. 如申請專利範圍第10項之表面狀態測定分析資訊管理方法，其中，具備有畫像顯示步驟，其係將被記憶在前述畫像記憶手段的前述畫像資料，依前述畫像資料的前述攝影日順序進行顯示，在前述畫像顯示步驟中係在顯示畫面上設定前述座標系，將決定出前述座標系的位置的各畫像資料配置在前述座標系的位置而依前述攝影日順序進行顯示。
12. 如申請專利範圍第11項之表面狀態測定分析資訊管理方法，其中，在前述畫像顯示步驟中係將前述畫像資料以前述攝影日順序顯示在最前面，且保持在顯示出與比被顯示在最前面的該畫像資料為更前被顯示的前述畫像資料的最前面所顯示的該畫像資料不相重疊的部分的狀態。
13. 如申請專利範圍第11項之表面狀態測定分析資訊管理方法，其中，在前述畫像顯示步驟中係當依前述攝影日順序顯示前述畫像資料時，在顯示該畫像資料的顯示範圍係包含：具有被顯示的該畫像資料的部分、及沒有該畫像資料的部分，在沒有該畫像資料的部分，若有相較於被顯示的該畫像資料，前述攝影日為更前或更後的前述畫像資料時，由前述攝影日為更前或更後的前述畫像資料生成被內插的畫像資料，在被顯示在前述顯示範圍的沒有前述畫像資料的部分顯示被內插的前述畫像資料。
14. 如申請專利範圍第10項之表面狀態測定分析資訊管理方法，其中，在前述位置決定步驟中係若在互相比較 的前述畫像資料有大致一致的畫像區域時，根據前述畫像區域，決定複數前述畫像資料的一個前述座標系中的相對位置。
15. 如申請專利範圍第14項之表面狀態測定分析資訊管理方法，其中，具備有：重疊感測步驟，其係將依序被記憶在前述畫像記憶手段的前述畫像資料彼此進行比較，判定在前述畫像資料彼此是否有互相大致一致的前述畫像區域，在前述位置決定步驟中，係若有互相大致一致的前述畫像區域時，設定以其中一方前述畫像資料為基準的前述座標系，決定將互相大致一致的前述畫像區域與該其中一方前述畫像資料相重疊的狀態的另一方前述畫像資料的前述座標系中的位置，在前述重疊感測步驟中，係將藉由前述位置決定步驟已決定出前述座標系的位置的前述畫像資料、及尚未決定出前述座標系的位置的前述畫像資料進行比較，來判定是否有互相大致一致的前述畫像區域，在前述位置決定步驟中，係對於決定出前述座標系的位置的前述畫像資料，若有具有大致一致的前述畫像區域的前述座標系的位置未決定的前述畫像資料時，根據將決定出前述座標系的位置的前述畫像資料、與未決定出前述座標系的位置的前述畫像資料，以互相大致一致的前述畫像區域互相重疊的方式進行配置時的前述畫像資料彼此的彼此位置關係，決定未決定出前述座標系的 位置的前述畫像資料的前述座標系的位置。
16. 如申請專利範圍第15項之表面狀態測定分析資訊管理方法，其中，在前述重疊感測步驟中，係當判定在前述畫像資料彼此是否有互相大致一致的前述畫像區域時，抽出與被前述畫像資料的前述攝影手段所攝影到的對象物的種類相對應的特徵點的位置，將每個前述畫像資料的前述特徵點的配置型樣相比較，若前述特徵點的配置型樣有大致一致的部分時，即判定為具有互相大致一致的前述畫像區域。
17. 如申請專利範圍第16項之表面狀態測定分析資訊管理方法，其中，被形成為前述攝影手段的前述攝影對象的前述表面被設為肌膚的表面，前述重疊感測步驟中由前述畫像資料被抽出的前述特徵點為前述肌膚表面上的各毛細孔的預定部位。
18. 如申請專利範圍第16項之表面狀態測定分析資訊管理方法，其中，被形成為前述攝影手段的前述攝影對象的前述表面係被設為肌膚的表面，前述重疊感測步驟中由前述畫像資料所抽出的前述特徵點為前述肌膚表面上的預定尺寸以下的各雀斑的預定部位。