TWI680747B - 資訊處理裝置、資訊處理方法及資訊處理程式 - Google Patents

資訊處理裝置、資訊處理方法及資訊處理程式 Download PDF

Info

Publication number
TWI680747B
TWI680747B TW104126865A TW104126865A TWI680747B TW I680747 B TWI680747 B TW I680747B TW 104126865 A TW104126865 A TW 104126865A TW 104126865 A TW104126865 A TW 104126865A TW I680747 B TWI680747 B TW I680747B
Authority
TW
Taiwan
Prior art keywords
captured image
skin
information processing
image
processing device
Prior art date
Application number
TW104126865A
Other languages
English (en)
Other versions
TW201617028A (zh
Inventor
伊神徹
中村雄介
Original Assignee
日商新力股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商新力股份有限公司 filed Critical 日商新力股份有限公司
Publication of TW201617028A publication Critical patent/TW201617028A/zh
Application granted granted Critical
Publication of TWI680747B publication Critical patent/TWI680747B/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/28—Determining representative reference patterns, e.g. by averaging or distorting; Generating dictionaries
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/40—Analysis of texture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/772—Determining representative reference patterns, e.g. averaging or distorting patterns; Generating dictionaries
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20021—Dividing image into blocks, subimages or windows
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30088—Skin; Dermal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30168—Image quality inspection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biomedical Technology (AREA)
  • Public Health (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Biophysics (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本發明目的在於期望於拍攝到非肌膚區域之情形時，輸出拍攝到非肌膚區域之事態。
本發明提供一種資訊處理裝置，其包含：判別部，其至少判別拍攝圖像是否為藉由對非肌膚區域拍攝而得之非肌膚區域圖像；及輸出部，其係於判別上述拍攝圖像為上述非肌膚區域圖像之情形時，進行所定之第1輸出。

Description

資訊處理裝置、資訊處理方法及資訊處理程式
本發明係關於資訊處理裝置、資訊處理方法及程式。
使用者利用相機拍攝肌膚或頭髮等部位時，會有拍攝到不適合供肌膚解析或專家診斷之圖像之案例。作為用以因應此種案例之技術揭示有各種技術。作為第一種技術，揭示有為了定期拍攝同一患部，而所定相機可拍攝相同患部之位置及構圖，並將上述相機之位置及構圖反饋給使用者之技術(例如，參照專利文獻1)。
作為第二種技術，揭示於使用者利用手持之相機拍攝肌膚或牙齒等部位時檢測到手振之情形時，輸出用以促使使用者採取必要措施之警報顯示之技術(例如，參照專利文獻2)。又，作為第三種技術，有自藉由串流拍攝經緩存之圖像中，由清晰度之觀點而選擇適當圖像之技術(例如，參照專利文獻3)。
[先前技術文獻] [專利文獻]
[專利文獻1]日本特開2012-254221號公報
[專利文獻2]日本特開2008-118635號公報
[專利文獻3]日本特開2010-88863號公報
然而，於拍攝到非肌膚區域之情形時，理想為輸出拍攝到非肌 膚區域。
根據本發明，提供一種資訊處理裝置，其包含：判別部，其至少判別拍攝圖像是否為藉由對非肌膚區域拍攝而得之非肌膚區域圖像；及輸出部，其係於判別上述拍攝圖像為上述非肌膚區域圖像之情形時，進行所定之第1輸出。
根據本發明，提供一種資訊處理方法，其包含：至少判別拍攝圖像是否為藉由對非肌膚區域拍攝而得之非肌膚區域圖像，及於藉由處理器判別上述拍攝圖像為上述非肌膚區域圖像之情形時，進行所定之第1輸出。
根據本發明，提供一種程式，其係用以使電腦作為資訊處理裝置發揮功能者，該資訊處理裝置包含：判別部，其至少判別拍攝圖像是否為藉由對非肌膚區域拍攝而得之非肌膚區域圖像；及輸出部，其係於判別上述拍攝圖像為上述非肌膚區域圖像之情形時，進行所定之第1輸出。
如以上說明根據本發明，於拍攝到非肌膚區域之情形時，可輸出拍攝到非肌膚區域之事。另，上述效果未必為限定者，可與上述效果一起、或取代上述效果，獲得本說明書所示之任一效果、或可自本說明書掌握之其他效果。
1‧‧‧肌膚解析系統
10‧‧‧伺服器(資訊處理裝置)
20‧‧‧資訊處理終端
30‧‧‧相機
31‧‧‧照明部
32‧‧‧筒部
33‧‧‧框體
34‧‧‧透鏡
35‧‧‧圖像感測器
40‧‧‧中繼裝置
50‧‧‧使用者介面部
60‧‧‧肌膚解析處理部
100‧‧‧資料清理處理部
105‧‧‧判別部
110‧‧‧抖動/模糊檢測部
111‧‧‧特徵量擷取部
111a‧‧‧第1特徵量擷取部
111b‧‧‧第2特徵量擷取部
111c‧‧‧第3特徵量擷取部
112‧‧‧分類器
113‧‧‧辭典資料記憶部
120‧‧‧非肌膚區域拍攝檢測部
121‧‧‧特徵量擷取部
121a‧‧‧第1特徵量擷取部
121b‧‧‧第2特徵量擷取部
121c‧‧‧第3特徵量擷取部
122‧‧‧分類器
123‧‧‧辭典資料記憶部
130‧‧‧位置偏移檢測部
131‧‧‧特徵量擷取部
131a‧‧‧圖像之差分擷取
131b‧‧‧根據閾值判別
132‧‧‧分類器
133‧‧‧辭典資料記憶部
140‧‧‧非密接檢測部
141‧‧‧特徵量擷取部
141a‧‧‧亮度之差分擷取
141b‧‧‧根據閾值判別
142‧‧‧分類器
143‧‧‧辭典資料記憶部
150‧‧‧檢測結果整形部
156‧‧‧主機匯流排
160‧‧‧輸出部
170‧‧‧反饋部
180‧‧‧後設資料賦予部
901‧‧‧CPU
902‧‧‧ROM
903‧‧‧RAM
911‧‧‧儲存裝置
912‧‧‧驅動器
915‧‧‧通訊裝置
Fa‧‧‧肌膚表面
LED1‧‧‧照明光源
LED2‧‧‧照明光源
LEDi‧‧‧照明光源
LEDN‧‧‧照明光源
圖1係顯示本發明實施形態之肌膚解析系統之構成例之圖。
圖2係顯示相機之構成例之圖。
圖3係顯示照明部之構成例之圖。
圖4係顯示伺服器之功能構成例之方塊圖。
圖5係顯示判別部之功能構成例之方塊圖。
圖6係顯示抖動/模糊檢測部之功能構成例之方塊圖。
圖7係顯示將亮度圖像分割為相同尺寸之6個區塊之例之圖。
圖8係顯示非肌膚拍攝檢測部之功能構成例之方塊圖。
圖9係用以說明位置偏移檢測部之功能之圖。
圖10係用以說明連續拍攝複數張圖像之例之圖。
圖11係用以說明非密接檢測部之功能之圖。
圖12係顯示於紫外線光照射時拍攝之拍攝圖像之例之圖。
圖13係顯示同實施形態之資訊處理裝置之硬體構成例之圖。
以下參照附加圖式，對本發明較佳之實施形態詳細地進行說明。另，於本說明書及圖式中，關於實質上具有相同功能構成之構成要素標註相同之符號，藉此省略重複說明。
又，於本說明書及圖式中，亦有於相同之符號後面標註不同之字母或數字以區分實質上具有相同功能構成之複數個構成要素之情形。然而，於無需特別區分實質上具有相同功能構成之複數個構成要素各者之情形時，僅標註相同符號。
另，說明設為以以下之順序進行者。
1.實施形態之概要
2.肌膚解析系統之功能構成例
3.資訊處理裝置之硬體構成例
4.結尾
<1.實施形態之概要>
首先，對本發明實施形態之概要進行說明。圖1係顯示本發明實施形態之肌膚解析系統之構成例之圖。如圖1所示，本發明實施形態之肌膚解析系統1包含：伺服器10、資訊處理終端20、及相機30。資訊處理終端20可為PC(Personal Computer：個人電腦)、智慧型手機、 行動電話機、平板PC、PDA(Personal Digital Assistant：個人數位助理)、HMD等。又，如圖1所示，伺服器10、資訊處理終端20、及相機30可經由中繼裝置40而互相通訊。例如，中繼裝置40係可為Wi-fi(登錄商標)路由器等。
此處，對相機30之構成例簡單地進行說明。圖2係顯示相機30之構成例之圖。如圖2所示，相機30包含：照明部31、筒部32、框體33、透鏡34、及圖像感測器35。透鏡34及圖像感測器35設置於框體33之內部。又，照明部31設置於筒部32之內部。
於圖2所示之例中，自照明部31照射之光到達肌膚表面Fa。又，藉由肌膚表面Fa反射之光通過透鏡34到達圖像感測器35。此時，若筒部32密接於肌膚表面Fa，則可降低自照明部31照射之光洩漏至相機30外側之可能性，亦可降低進入相機30內側之光到達圖像感測器35之可能性。
藉由圖像感測器35拍攝之拍攝圖像(靜止圖像)被發送至伺服器10，可藉由伺服器10對拍攝圖像進行肌膚解析。又，藉由肌膚解析處理獲得之肌膚解析結果被發送至資訊處理終端20，可藉由資訊處理終端20將肌膚解析結果反饋給使用者。另，於本發明實施形態中，主要說明藉由伺服器10進行肌膚解析處理之例，但肌膚解析處理亦可如其後說明般，藉由資訊處理終端20進行。
接著，對照明部31之構成例進行說明。圖3係顯示照明部31之構成例之圖。例如，照明部31具有複數個照明光源。於圖3所示之例中，照明部31具有LED1、LED2、LEDi……LEDN作為複數個照明光源，但照明光源之種類不限定於LED(Organic Light Emitting Diode：有機發光二極體)。如此於照明部31具有複數個照明光源之情形時，可藉由複數個照明光源各者照射不同拍攝條件(例如，波長、曝光時間等)之光。
於本發明實施形態中，設想使用者欲利用相機30拍攝肌膚區域之場景。於上述場景中，肌膚解析系統1於利用相機30拍攝之拍攝圖像不適合肌膚解析處理之情形(或拍攝狀況不適合之情形)時，輸出該旨意。根據上述之構成，於利用相機30拍攝之拍攝圖像不適合肌膚解析處理之情形(或拍攝狀況不適合之情形)時，輸出該旨意。
以上，已對本發明實施形態之概要進行說明。
<2.肌膚解析系統之功能構成例>
接著，對伺服器(資訊處理裝置)10之功能構成例進行說明。圖4係顯示伺服器10之功能構成例之方塊圖。如圖4所示，伺服器10包含資料清理處理部100。資料清理處理部100包含：判別部105、與輸出部160。判別部105基於自相機30輸入之拍攝圖像，判別自相機30輸入之拍攝圖像是否不適合肌膚解析處理(或拍攝狀況是否不適合)。又，輸出部160包含：反饋部170、及後設資料賦予部180。關於上述輸出部160之詳細於後進行說明。
另，於本說明書中，說明伺服器10具有資料清理處理部100之全部之例，但資料清理處理部100之一部分或全部亦可包含於其他裝置(例如，資訊處理終端20、專用之裝置等)。又，於本說明書中，說明資訊處理終端20具有使用者介面部50之例，但使用者介面部50亦可包含於其他裝置(例如，專用之終端等)。再者，於本說明書中，說明伺服器10具有肌膚解析處理部60之例，但肌膚解析處理部60亦可包含於其他裝置(例如，資訊處理終端20、專用之裝置等)。
接著，對判別部105之功能構成例進行說明。圖5係顯示判別部105之功能構成例之方塊圖。如圖5所示，判別部105包含：抖動/模糊檢測部110、非肌膚區域拍攝檢測部120、位置偏移檢測部130、非密接檢測部140、及檢測結果整形部150。另，於本說明書中，說明判別部105包含該等全部區塊之例，但判別部105可不包含該等部分區塊。
例如，判別部105可包含抖動/模糊檢測部110、非肌膚區域拍攝檢測部120、位置偏移檢測部130及非密接檢測部140中任一個。或，判別部105可包含該等區塊中，任意二個或三個之組合。接著，對抖動/模糊檢測部110、非肌膚區域拍攝檢測部120、位置偏移檢測部130及非密接檢測部140各自具有之功能順次進行說明。
圖6係顯示抖動/模糊檢測部110之功能構成例之方塊圖。此處，於使用者利用手持之相機30拍攝肌膚時，有產生手振之情形。又，於相機30之對肌膚之按壓不足之情形或過度之情形時，有產生焦點模糊之情形。利用抖動/模糊檢測部110，可判別拍攝圖像是否產生抖動或模糊。如圖6所示，抖動/模糊檢測部110包含：特徵量擷取部111、分類器112、及辭典資料記憶部113。抖動/模糊檢測部110包含第1特徵量擷取部111a、第2特徵量擷取部111b及第3特徵量擷取部111c。
此處，第1特徵量擷取部111a擷取拍攝圖像整體中用以檢測模糊或抖動之第1特徵量。更具體而言，第1特徵量擷取部111a將白色光照射時之拍攝圖像轉換為亮度圖像。接著，第1特徵量擷取部111a算出亮度圖像之功率頻譜。接著，第1特徵量擷取部111a將該功率頻譜於各方向之振幅累計於每個頻帶。接著，第1特徵量擷取部111a將以每個頻帶之累計結果為各個要素之特徵向量作為第1特徵量而產生。
又，有可能因相機30之僅單側懸空而未密接於肌膚等，造成僅於拍攝圖像之一區域產生焦點模糊。第2特徵量擷取部111b擷取用以檢測此種焦點模糊之第2特徵量。更具體而言，第2特徵量擷取部111b將白色光照射時之拍攝圖像轉換為亮度圖像。接著，第2特徵量擷取部111b將亮度圖像分割為相同尺寸之6個區塊。圖7係顯示將亮度圖像分割為相同尺寸之6個區塊之例之圖。
另，於使用密接於肌膚拍攝之相機30之情形，有容易於拍攝圖像4個角落產生僅一區域之焦點模糊之特徵，利用該特徵，第2特徵量 擷取部111b可將亮度圖像分割為相同尺寸之4個角落區塊。或，第2特徵量擷取部111b可將亮度圖像分割為包含此種4個角落區塊之相同尺寸之複數個區塊。
且，第2特徵量擷取部111b算出亮度圖像之功率頻譜。接著，第2特徵量擷取部111b對各區塊進行將該功率頻譜於各方向之振幅累計於每個頻帶之處理。藉此，可僅獲得區塊數量之以各頻帶之累計結果為要素之特徵向量。接著，第2特徵量擷取部111b將以各區塊間特徵向量之相同維度要素之分散值為新要素之特徵向量作為第2特徵量而產生。
又，第3特徵量擷取部111c根據與上述之擷取第2特徵量相同之目的，擷取用以檢測焦點模糊之第3特徵量。更具體而言，第3特徵量擷取部111c將白色光照射時之拍攝圖像轉換為亮度圖像。接著，第3特徵量擷取部111c將亮度圖像分割為相同尺寸之6個區塊(參照圖7)。
另，與上述擷取第2特徵量時相同，第3特徵量擷取部111c亦可將亮度圖像分割為相同尺寸之4個角區塊。或，第3特徵量擷取部111c亦可將亮度圖像分割為包含此種4個角區塊之相同尺寸之複數個區塊。然後，第3特徵量擷取部111c算出每個區塊之亮度平均值。接著，第3特徵量擷取部111c將區塊間以亮度平均值之差分為要素之特徵向量作為第3特徵量而產生。
分類器112藉由判別於白色光照射時之拍攝圖像是否產生模糊或抖動而獲得判別結果。更詳細而言，分類器112算出表示拍攝圖像產生之模糊程度或抖動程度之評估值(以下，亦稱為「適合度」)，並根據評估值是否在所定之範圍內，判別拍攝圖像是否產生模糊或抖動。
評估值之算出方法無特別限定。例如，設想基於自產生模糊或抖動之圖像群擷取之第1~第3特徵量，將藉由學習功能獲得之辭典資料預先登錄於辭典資料記憶部113之情形。於上述情形，基於藉由辭 典資料記憶部113記憶之辭典資料而預先建構判別函數，分類器112將藉由特徵量擷取部111擷取之第1~第3特徵量輸入至該判別函數，藉此獲得評估值即可。
另，於圖6所示之例中，作為使用於建立辭典資料之特徵量及自拍攝圖像擷取之特徵量，主要說明擷取第1~第3特徵量之例。然而，可不使用第1~第3特徵量全部。例如，可使用第1~第3特徵量中任一個。或，可使用第1~第3特徵量中任意二個或三個之組合，亦可使用除了此處說明之第1~第3特徵量以外之特徵量。
例如，設為使用亮度圖像功率頻譜之每個頻帶之振幅，作為上述第1及第2特徵量。然而，圖像頻率相關之任意資訊(記述圖像頻率空間狀態之特徵量)皆可作為特徵量使用。例如，藉由相機30內部之ISP(Image Signal Processor：圖像信號處理器)將圖像編碼為JPEG(Joint Photographic Experts Group：聯合圖像專家小組)形式時之DCT(discrete cosine transform：離散餘弦變換)函數亦可作為特徵量使用。
圖8係顯示非肌膚區域拍攝檢測部120之功能構成例之方塊圖。此處，即使使用者欲利用相機30拍攝肌膚區域，亦有拍攝到非肌膚區域之案例。例如，作為拍攝到非肌膚區域之案例，有取代肌膚區域而為空白或相機托架、衣服、桌子等肌膚區域以外者落在拍攝範圍之案例。又，作為拍攝到非肌膚區域之其他案例，有落在拍攝範圍之肌膚區域被頭髮或碎片等異物遮擋之案例。
利用非肌膚區域拍攝檢測部120，可判別拍攝圖像是否為藉由對非肌膚區域進行拍攝而獲得之非肌膚區域圖像。非肌膚區域可相當於使用者的肌膚以外之區域。如圖8所示，非肌膚區域拍攝檢測部120包含：特徵量擷取部121、分類器122、及辭典資料記憶部123。非肌膚區域拍攝檢測部120具有第1特徵量擷取部121a、第2特徵量擷取部 121b及第3特徵量擷取部121c。
此處，第1特徵量擷取部121a擷取第1特徵量。更具體而言，第1特徵量擷取部121a將白色光照射時之拍攝圖像轉換為HSV色空間(藉由Hue、Saturation及Value之組合指定顏色之色空間)。接著，第1特徵量擷取部121a將色相及彩度各者之平均值及分散值與色相-彩度空間之變異數作為第1特徵量而產生。
又，第2特徵量擷取部121b擷取第2特徵量。更具體而言，第2特徵量擷取部121b將白色光照射時之拍攝圖像轉換為HSV色空間。接著，第1特徵量擷取部121a基於HSV色空間，將色相[0,360]-彩度[0,1]空間之出現頻率相關之對映作為第2特徵量而產生。藉由第1特徵量擷取部121a產生之對映，例如色相及彩度分別為1刻度。
又，第3特徵量擷取部121c擷取第3特徵量。更具體而言，第3特徵量擷取部121c將白色光照射時之拍攝圖像轉換為HSV色空間。接著，第3特徵量擷取部121c將色相[0,360]相關之直方圖作為第3特徵量而產生。
分類器122判別白色光照射時之拍攝圖像是否為非肌膚區域圖像，藉此獲得判別結果。更詳細而言，分類器112算出表示拍攝圖像之非肌膚區域圖像相似度之評估值，根據評估值是否落在所定之範圍內，判別拍攝圖像是否為非肌膚區域圖像。
評估值之算出方法無特別限定。例如，設想基於自非肌膚區域圖像群擷取之第1~第3特徵量將藉由學習功能獲得之辭典資料預先登錄於辭典資料記憶部123之情形。於上述情形，可基於藉由辭典資料記憶部123記憶之辭典資料預先建構判別函數，分類器122將藉由特徵量擷取部121擷取之第1~第3特徵量輸入至該判別函數，藉此獲得評估值即可。
另，於圖8所示之例中，作為使用於建立辭典資料之特徵量及自 拍攝圖像擷取之特徵量，主要說明擷取第1~第3特徵量之例。然而，亦可不全部使用第1~第3特徵量。例如，可使用第1~第3特徵量中任一個。或，可使用第1~第3特徵量中任意二個之組合，亦可使用除了此處說明之第1~第3特徵量以外之特徵量。
例如，於上述中，設為使用白色光照射時之拍攝圖像之色相的平均值或分散值等作為特徵量。然而，與色相相關之任意資訊皆可作為特徵量使用。
又，分類器122於照射不同波長之光時拍攝之2個拍攝圖像彼此的對應之像素值的差分超過閾值之區域，具有多於所定比例之情形時，可判別拍攝圖像為非肌膚區域圖像。例如，作為波長不同之光，可使用紅色光及白色光。於上述之情形，2個拍攝圖像之彼此的對應之像素值的差分超過閾值之區域可視為毛存在之區域，該區域具有多於所定比例之狀態可視為毛存在之區域多於所定之比例之狀態。
圖9係用以說明位置偏移檢測部130之功能之圖。此處，設想相機30一面變更分光條件或曝光時間等拍攝條件，一面連續拍攝複數張圖像。圖10係用以說明連續拍攝複數張圖像之例之圖。此時，拍攝時間越長，越容易產生因使用者手振所致之位置偏移。又，拍攝時間越長，則誤認為拍攝結束之使用者於拍攝中途自拍攝部位移開相機30之可能性越高。
根據位置偏移檢測部130，可判別連續拍攝時是否產生拍攝部位之位置偏移。如圖9所示，位置偏移檢測部130具有擷取圖像之差分131a、及根據閾值進行判別131b之功能。首先，特徵量擷取部131將於利用相機30連續拍攝之複數張圖像(以下，亦稱為「位置偏移檢測對象區間」)之前後拍攝之2個圖像轉換為亮度圖像。接著，特徵量擷取部131算出各亮度圖像之距離或類似度。
接著，分類器132基於各亮度圖像之距離或類似度而判別是否產 生位置偏移。具體而言，分類器132於各亮度圖像之距離高於藉由辭典資料記憶部133預先作為辭典資料而記憶之閾值之情形時(於各亮度圖像之類似度低於閾值之情形時)判別為產生位置偏移。另一方面，分類器132於各亮度圖像之距離低於閾值之情形時(各亮度圖像之類似度高於閾值之情形時)判別為未產生位置偏移。
自距離減去閾值之值(自閾值減去類似度之值)作為適合度(位置偏移程度)被輸出。又，各亮度圖像之距離可為2個亮度圖像中對應之像素彼此之乘方誤差和，亦可為分別自2個兩個亮度圖像產生之亮度直方圖間之距離。
此處，於位置偏移檢測對象區間之前後拍攝之2個圖像可為於相同之拍攝條件下拍攝之圖像。於圖10中顯示於位置偏移檢測對象區間之前後拍攝之2個圖像皆為於白色無偏光照射時拍攝之圖像之例。然而，位置偏移檢測對象區間之前後拍攝之2個圖像亦可為於不同之拍攝條件(照明光之波長等)下拍攝之圖像。於上述之情形時，由於可無需對位置偏移檢測用追加拍攝圖像，故可更簡便地檢測位置偏移。
例如，僅提取白色光照射時拍攝之圖像之G要素之圖像、與僅提取綠色光照射時拍攝之圖像之G要素之圖像，可作為於位置偏移檢測對象區間的前後拍攝之2個圖像使用。根據上述方法，分類器132藉由與上述相同之程序，可檢測位置偏移。
又，若於不同之拍攝條件下拍攝之2個圖像兩者皆無焦點模糊，則特徵量擷取部131可由局部特徵量記述該等2個圖像，並算出局部特徵量彼此之距離或類似度。接著，分類器132於局部特徵量彼此之距離高於閾值之情形時(局部特徵量彼此之類似度低於閾值之情形時)，判別為產生位置偏移。另一方面。分類器132於局部特徵量彼此之距離低於閾值之情形時(局部特徵量彼此之類似度高於閾值之情形時)，判別為未產生位置偏移。
另，作為局部特徵量，可使用HOG(Histogram of Oriented Gradients：方向梯度直方圖)或SIFT(Scale Invariant Feature Transform：尺度不變特徵變換)等。
又，分類器132可使用圖像以外之資料，判別連續拍攝時是否產生拍攝部位之位置偏移。例如，分類器132可根據所定之感測器資料之變化是否高於閾值而判別是否產生位置偏移。例如，感測器資料之變化可為感測器資料之每單位時間之變化量。
例如，於相機30中接觸於肌膚表面Fa之面設置有接觸感測器之情形，於自接觸感測器獲得之感測器資料之變化未超過閾值之情形時，分類器132可判別為相機30之位置於拍攝中穩定而未產生位置偏移。另一方面，於自接觸感測器獲得之感測器資料之變化超過閾值之情形時，分類器132可判別為拍攝中相機30之位置不穩定產生位置偏移。
圖11係用以說明非密接檢測部140之功能之圖。此處，若相機30之前端為未密接於肌膚表面Fa之狀態，會導致於外部光進入於相機30內部之狀態進行拍攝。藉由非密接檢測部140，可判別是否於相機30之前端未密接於肌膚表面Fa之狀態拍攝拍攝圖像。如圖11所示，非密接檢測部140具有亮度之差分算出141a、及根據閾值判別141b之功能。
首先，特徵量擷取部141將紫外線光照射時或紅外線光照射時之拍攝圖像轉換為HSV色空間。接著，特徵量擷取部141產生該拍攝圖像整體之亮度直方圖ha。亮度之值域可為[0,100]。又，亮度直方圖之Bin(區塊)寬度無限定，但例如亮度直方圖之Bin寬度可為「1」。
另一方面，將基於相機30之前端密接於肌膚之狀態下拍攝之密接圖像群而產生之亮度直方圖hb預先登錄於辭典資料記憶部143。相同地，將基於相機30之前端未密接於肌膚之狀態下拍攝之非密接圖像 群而產生之亮度直方圖hc預先登錄於辭典資料記憶部143。因此，特徵量擷取部141藉由以下之式(1)及(2)，算出亮度直方圖hb及hc與亮度直方圖ha之距離d1及d2。
d1=dist(ha,hb)……(1)
d2=dist(ha,hc)……(2)
然而，dist(x,y)表示相對於x、y之適當之距離函數。接著，分類器142基於亮度直方圖ha而判別拍攝圖像是否為於相機30之前端密接於肌膚之狀態下被拍攝。更具體而言，分類器142基於亮度直方圖ha、與亮度直方圖hc及hb各者之距離之差分，判別拍攝圖像是否為於相機30之前端密接於肌膚之狀態下被拍攝。更具體而言，分類器142藉由以下之式(3)算出得分s。
s=d1-d2……(3)
接著，分類器142於得分s小於閾值之情形時，可判別拍攝圖像為於相機30之前端未密接於肌膚表面Fa之狀態下被拍攝。另一方面，分類器142於得分s為閾值以上之情形時，可判別拍攝圖像為於相機30之前端密接於肌膚表面Fa之狀態下被拍攝。自閾值減去得分s之值係作為適合度(非密接程度)輸出。
另，一般之室內照明若與400nm至900nm波長之光比較，其400nm以下波長之光(紫外線光)或900nm以上波長之光之含有量較少。鑑於此種傾向，如上述般，藉由使用紫外線光照射時或紅外線光照射之拍攝圖像作為拍攝圖像，相機30對肌膚表面Fa密接時與非密接時之差異更為顯著。圖12係顯示紫外線光照射時所拍攝之拍攝圖像之例。
如圖12所示，可掌握紫外線光照射時於相機30之前端密接於肌膚表面Fa之狀態下拍攝之拍攝圖像係亮度整體上大致均一。另一方面，可掌握紫外線光照射時於相機30之前端未密接於肌膚表面Fa之狀態下拍攝之拍攝圖像其亮度有所偏差。
另，於圖12中顯示紫外線光照射時所拍攝之拍攝圖像之例，但可使用照射波長650nm之光之紅色LED或照射波形450nm之光之藍色LED而取代照射紫外線光之LED。即使於上述之情形，藉由與上述方法相同之方法，可判別拍攝圖像是否於相機30之前端未密接於肌膚表面Fa之狀態下被拍攝。
返回至圖4及圖5接著說明。輸出部160於判別為拍攝圖像不適合肌膚解析處理(或拍攝狀況不適合)之情形時，進行所定之輸出。例如，於藉由非肌膚區域拍攝檢測部120判別為拍攝圖像為非肌膚區域圖像之情形時，輸出部160進行所定之第1輸出。又，於藉由位置偏移檢測部130判別為產生位置偏移之情形時，輸出部160進行所定之第2輸出。
又，輸出部160於判別為拍攝圖像於相機30未密接於肌膚表面Fa之狀態下被拍攝之情形時，進行所定之第3輸出。又，於藉由抖動/模糊檢測部110判別為於拍攝圖像產生模糊或抖動之情形時，輸出部160進行所定之第4輸出。上述輸出可以任意方式進行。例如，作為輸出之例，反饋部170可於使用者介面部50進行對使用者之所定反饋。所定之反饋亦無特別限定。
例如，所定之反饋可為向資訊處理終端20顯示警報，可為點亮相機30之顯示用LED，可為起動相機30之振動器功能，可為自相機30或設置於資訊處理終端20之揚聲器輸出警報聲。又，上述第1~第4之輸出可相同，亦可不同。若使第1~第4之輸出不同，則由於根據拍攝圖像不適合肌膚解析處理之理由(以下，亦稱為「理由」)而進行不同之輸出，故使用者可掌握理由。
例如，反饋部170可使相機30之顯示用LED執行與理由建立對應之顯色，亦可使相機30之顯示用LED執行與理由建立對應之亮滅模式。又，反饋部170可使與理由建立對應之警報顯示顯示於資訊處理 終端20。例如，反饋部170亦可為適合度越高則越增加顯示之警報之資訊量。
又，反饋部170可進行對應於適合度之反饋。如此，使用者可掌握拍攝圖像之適合度。例如，反饋部170可使對應於適合度之警報顯示顯示於資訊處理終端20，而基於適合度控制對資訊處理終端20顯示及不顯示警報。例如，反饋部170於適合度大於閾值之情形時，進行警報顯示，於適合度小於閾值之情形時，不顯示警報。
又，檢測結果整形部150可將分別自抖動/模糊檢測部110、非肌膚區域拍攝檢測部120、位置偏移檢測部130及非密接檢測部140輸出之判別結果直接輸出至輸出部160，亦可整形後輸出至輸出部160。例如，於檢測結果整形部150以複數個理由判別拍攝圖像不適合肌膚解析處理之情形時，進行與第1~第4之輸出不同之輸出。
更具體而言，設想於藉由抖動/模糊檢測部110判別拍攝圖像產生模糊或抖動之情形，且藉由非密接檢測部140判別為拍攝圖像於相機30之前端未密接於肌膚表面Fa之狀態下被拍攝之情形。於上述之情形時，由於考量到相機30與肌膚表面Fa隔開，故反饋部170可輸出相機30與肌膚表面Fa隔開之旨意。
又，設想雖藉由抖動/模糊檢測部110判別拍攝圖像產生模糊或抖動之情形，但藉由非密接檢測部140判別為拍攝圖像於相機30之前端密接於肌膚表面Fa之狀態下被拍攝之情形。於上述之情形時，由於考慮到相機30過度按壓於肌膚表面Fa，故反饋部170可輸出相機30過度按壓於肌膚表面Fa之旨意。
再者，反饋部170可進行對應於使用者操作履歷之反饋。例如，反饋部170根據使用者實施之重拍攝次數，使用於判斷進行警報顯示之閾值(範圍)之嚴格度變動。更具體而言，於使用者實施之重拍攝次數超過上限值之情形時，縮小用以判斷進行警報顯示之適合度之範 圍。藉此，可抑制帶給使用者之麻煩。
或，反饋部170可對過去曾拒絕警報顯示之履歷之使用者不輸出警報。藉此，可抑制帶給使用者之麻煩。
又，若雖藉由判別部105判別拍攝圖像適合肌膚解析處理(或拍攝狀況適合)，但由使用者輸入拍攝圖像不適合肌膚解析處理(或拍攝狀況不適合)旨意之情形，反饋部170可擴大用以判斷進行警報顯示之適合度之範圍。
另一方面，若雖藉由判別部105判別拍攝圖像不適合肌膚解析處理(或拍攝狀況不適合)，但由使用者輸入拍攝圖像適合肌膚解析處理(或拍攝狀況適合)旨意之情形，反饋部170可縮小用以判斷進行警報顯示之適合度之範圍。
作為輸出之例，後設資料賦予部180可對解析拍攝圖像之肌膚解析處理部60，將拍攝圖像不適合肌膚解析處理(或拍攝狀況不適合)之情事作為後設資料輸出。例如，後設資料賦予部180可對肌膚解析處理部60，將表示拍攝圖像是否不適合肌膚解析處理之值(或表示拍攝狀況是否不適合之值)連同理由作為後設資料而輸出。或，後設資料賦予部180可將適合度連同理由作為後設資料而輸出。
肌膚解析處理部60可基於後設資料控制肌膚解析處理所使用之參數。作為一例，肌膚解析處理部60於判別為拍攝圖像產生模糊或抖動之事作為後設資料而被輸入之情形時，可使判定肌膚細緻度之得分增加。
或，於肌膚解析處理部60中，可基於後設資料而控制統計資料算出時對資料之加權。作為一例，肌膚解析處理部60可不將判別為不適合肌膚解析處理之拍攝圖像使用於統計資料算出。又，肌膚解析處理部60亦可使判別為不適合肌膚解析處理之拍攝圖像之加權降低。
又，於使用者判斷是否將拍攝圖像使用於肌膚解析，並按照判 斷結果輸入操作之情形，後設資料賦予部180可將使用者操作履歷與圖像建立關聯。上述之使用者操作履歷亦可作為用以檢測不適合肌膚解析之圖像的辭典資料建立用之標示資料使用。
另，自後設資料賦予部180輸出之後設資料可藉由後設資料賦予部180整形為於肌膚解析處理部60中可處理之形式。另，後設資料賦予部180如圖4所示，可將圖像id與後設資料一起輸出至肌膚解析處理部60。或，後設資料賦予部180可將肌膚解析用圖像與後設資料一起輸出至肌膚解析處理部60。
以上，已對本發明實施形態之肌膚解析系統1之功能構成例進行說明。
<3.資訊處理裝置之硬體構成例>
接著，對本發明實施形態之資訊處理裝置10之硬體構成例進行說明。圖13係顯示本發明實施形態之資訊處理裝置10之硬體構成例之圖。然而，圖13所示之硬體構成例僅為顯示資訊處理裝置10之硬體構成之一例。因此，資訊處理裝置10之硬體構成不限定於圖13所示之例。
如圖13所示，資訊處理裝置10包含：CPU(Central Processing Unit：中央處理單元)901、ROM(Read Only Memory：唯讀記憶體)902、RAM(Random Access Memory：隨機存取記憶體)903、儲存裝置911、驅動器912、及通訊裝置915。
CPU901作為運算處理裝置及控制裝置發揮功能，按照各種程式而控制資訊處理裝置10內之動作整體。又，CPU901可為微處理器。ROM902記憶CPU901所使用之程式或運算參數等。RAM903暫時記憶於CPU901之執行中使用之程式、或於其執行中適當變化之參數等。該等藉由以CPU匯流排等構成之主機匯流排156而互相連接。
儲存裝置911係作為資訊處理裝置10之記憶部之一例構成的資料 儲存用裝置。儲存裝置911可包含記憶媒體、將資料記錄於記憶媒體之記錄裝置、自記憶媒體讀出資料之讀出裝置及刪除記錄於記憶媒體之資料之刪除裝置等。該儲存裝置911儲存由CPU901執行之程式或各種資料。
驅動器912係記憶媒體用讀寫器，內置或外接於資訊處理裝置10。驅動器912讀出記錄於安裝之磁碟、光碟、光磁碟、或半導體記憶體等可移除記憶媒體之資訊，並輸出至RAM903。又，驅動器912亦可將資訊寫入至可移除記錄媒體。
通訊裝置915經由網路(或直接地)與外部裝置通訊。通訊裝置915可為無線通訊用之介面，例如，可包含通訊天線、RF(Radio Frequency：射頻)電路、基頻處理器等。作為無線通訊用之介面之具體例，例舉對應於如CDMA(Code Division Multiple Access：分碼多重存取)、W-CDMA(Wideband Code Division Multiple Access：寬帶分碼多重存取)、LTE(Long Term Evolution：長期演進)、Wi-fi(登錄商標)(Wireless Fidelity：無線保真性)通訊方式之數據機等之通訊單元。
又，通訊裝置915可為有線通訊用之介面，例如，可包含連接端子、傳送電路及其他通訊處理用之電路。又，CPU901與通訊裝置915可藉由1個晶片構成，亦可作為個別之器件實現。又，圖13中雖未圖示，但資訊處理裝置10例如可藉由自充電式電池般之電力源供給之電力驅動，該電力源亦可構成為可對資訊處理裝置10裝卸。
以上，已對本發明實施形態之資訊處理裝置10之硬體構成例進行說明。
<4.結尾>
如以上說明，根據本發明之實施形態，提供一種資訊處理裝置10，其包含：判別部105，其至少判別拍攝圖像是否為藉由對非肌膚區域拍攝而得之非肌膚區域圖像；與輸出部160，其係於判別拍攝圖 像為非肌膚區域圖像之情形時，進行所定之第1輸出。根據上述之構成，於使用者欲利用相機30拍攝肌膚區域之場合中拍攝到非肌膚區域之情形時，可輸出拍攝到非肌膚區域之事。
於以下，對記載於先前技術文獻之技術與本發明實施形態之技術的差異詳細地進行說明。首先，作為第一種技術，揭示有為了定期拍攝同一患部，所定可拍攝相同患部之相機之位置及構圖，並將上述相機之位置及構圖反饋給使用者之技術(例如，參照專利文獻1)。然而，記載於專利文獻1之技術係用以判斷是否拍攝到相同患部之技術，無法檢測抖動或模糊圖像、或非肌膚區域拍攝圖像、位置偏移等，並將檢測結果反饋給使用者。
作為第二種技術，揭示有於使用者利用手持之相機拍攝肌膚或牙齒等部位時檢測到手振之情形，輸出用以促使使用者採取必要措施之警報顯示之技術(例如，參照專利文獻2)。然而，記載於專利文獻2之技術無法檢測非肌膚區域拍攝圖像、位置偏移、相機30對肌膚非密接等。又，記載於專利文獻2之技術無法進行將考量到拍攝圖像之不適合性對使用者反饋。
作為第三種技術，揭示有自藉由串流拍攝經緩存之圖像中，自清晰度之觀點選擇適當之圖像之技術(例如，參照專利文獻3)。然而，記載於專利文獻3之技術只能取得以與串流拍攝時之拍攝條件相同之拍攝條件拍攝之圖像。因此，無法應用於想要一面切換光之波長或曝光時間等之設定、一面連續拍攝之情形。另一方面，根據本發明實施形態，可將以與串流拍攝之拍攝條件不同之拍攝條件所拍攝之圖像使用於肌膚解析。
又，記載於專利文獻3之技術即使於取得以與串流拍攝時之拍攝條件相同之拍攝條件拍攝的圖像之情形，亦有受到控制串流拍攝時之記憶體I/O或傳送速度、清晰度判定之資料處理量之限制，使得圖像 之解析度等資料尺寸相關之部分有所限制之可能性。
以上，已參照附加圖式對本發明較佳之實施形態詳細地進行說明，但本揭示之技術範圍不限定於上述之例。只要為具有本揭示之技術領域之一般知識者，應明瞭得於申請專利範圍所記載之技術思想範疇內想出各種變化例或修改例，且應瞭解本發明之技術範圍涵蓋所有該等變化或修改。
又，亦可建立用以使內置於電腦內之CPU、ROM及RAM等硬體作為發揮與上述資訊處理裝置10所具有之功能相同功能之程式。又，亦可提供記錄有該程式之電腦可讀取之記錄媒體。
又，記載於本說明書之效果僅為說明或示例者，而並非限定於此。即，本揭示之技術除了上述之效果或取代上述之效果之外，相關技藝人士可自本說明書之記載中獲得明確之其他效果。
另，以下之構成亦屬於本發明之技術範圍。
(1)
一種資訊處理裝置，其包含：判別部，其至少判別拍攝圖像是否為藉由對非肌膚區域拍攝而得之非肌膚區域圖像；與輸出部，其係於判別上述拍攝圖像為上述非肌膚區域圖像之情形時，進行所定之第1輸出。
(2)
如上述(1)之資訊處理裝置，其中上述輸出部包含：反饋部，其係於判別上述拍攝圖像為上述非肌膚區域圖像之情形時，向使用者進行所定之反饋。
(3)
如上述(1)之資訊處理裝置，其中上述輸出部包含：後設資料賦予部，其係於判別上述拍攝圖像 為上述非肌膚區域圖像之情形時，對解析上述拍攝圖像之肌膚解析處理部輸出上述拍攝圖像為上述非肌膚區域圖像之事態。
(4)
如上述(1)~(3)中任一項之資訊處理裝置，其中上述判別部算出表示上述拍攝圖像之非肌膚區域圖像相似度之評估值，並根據上述評估值是否為所定之範圍內，而判別上述拍攝圖像是否為上述非肌膚區域圖像。
(5)
如上述(4)之資訊處理裝置，其中上述判別部將可自上述拍攝圖像獲得之至少與色相相關之資訊輸入至預先產生之判別函數，藉此獲得上述評估值。
(6)
如上述(1)~(3)中任一項之資訊處理裝置，其中上述判別部於不同波長之光照射時拍攝之2個拍攝圖像之彼此對應之像素值的差分超過閾值之區域存在多於所定比例之情形時，判別上述拍攝圖像為上述非肌膚區域圖像。
(7)
如上述(1)~(6)中任一項之資訊處理裝置，其中上述判別部判別連續拍攝時是否產生拍攝部位之位置偏移，且於判別產生上述位置偏移之情形時，上述輸出部進行所定之第2輸出。
(8)
如上述(7)之資訊處理裝置，其中上述判別部基於連續拍攝之複數張圖像之前後所拍攝之2個圖像各者之亮度圖像的距離或類似度，而判別是否產生上述位置偏移。
(9)
如上述(7)之資訊處理裝置，其中上述判別部根據所定之感測器資料之變化是否超過閾值，而判別是否產生上述位置偏移。
(10)
如上述(1)~(9)中任一項之資訊處理裝置，其中上述判別部進而判別上述拍攝圖像是否於相機未密接於肌膚之狀態下被拍攝，且上述輸出部係於判別為上述拍攝圖像於上述相機未密接於上述肌膚之狀態下被拍攝之情形時，進行所定之第3輸出。
(11)
如上述(10)之資訊處理裝置，其中上述判別部基於自上述拍攝圖像獲得之亮度直方圖，而判別上述拍攝圖像是否於上述相機未密接於上述肌膚之狀態下被拍攝。
(12)
如上述(11)之資訊處理裝置，其中上述判別部基於自上述拍攝圖像獲得之亮度直方圖、與預先登錄之上述相機對上述肌膚未密接時之亮度直方圖及上述相機對上述肌膚密接時之亮度直方圖各者之距離差分，判別上述拍攝圖像是否於上述相機未密接於上述肌膚之狀態下被拍攝。
(13)
如上述(1)~(12)中任一項之資訊處理裝置，其中上述判別部進而判別於上述拍攝圖像是否產生模糊或抖動，且於判別為於上述拍攝圖像產生模糊或抖動之情形時，上述輸出部進行所定之第4輸出。
(14)
如上述(13)之資訊處理裝置，其中 上述判別部算出表示上述拍攝圖像產生之模糊程度或抖動程度之評估值，並根據上述評估值是否為所定之範圍內，而判別拍攝圖像是否產生模糊或抖動。
(15)
如上述(14)之資訊處理裝置，其中上述判別部將自上述拍攝圖像而得之至少頻率相關之資訊輸入至預先產生之判別函數，藉此獲得上述評估值。
(16)
如上述(14)之資訊處理裝置，其中上述判別部將自上述拍攝圖像而得之至少區塊間之亮度平均值之差分輸入至預先產生之判別函數，藉此獲得上述評估值。
(17)
如上述(2)之資訊處理裝置，其中上述判別部算出表示上述拍攝圖像之非肌膚區域圖像相似度之評估值，並根據上述評估值是否為所定之範圍內，而判別上述拍攝圖像是否為上述非肌膚區域圖像，且上述反饋部進行對應於上述評估值之反饋。
(18)
如上述(3)之資訊處理裝置，其中上述判別部算出表示上述拍攝圖像之非肌膚區域圖像相似度之評估值，並根據上述評估值是否為所定之範圍內，而判別上述拍攝圖像是否為上述非肌膚區域圖像，且上述後設資料賦予部對上述肌膚解析處理部輸出上述評估值或對應於上述評估值之資料。
(19)一種資訊處理方法，其包含：至少判別拍攝圖像是否為藉由對非肌膚區域拍攝而得之非肌膚 區域圖像，及於藉由處理器判別上述拍攝圖像為上述非肌膚區域圖像之情形時，進行所定之第1輸出。
(20)
一種程式，其係用以使電腦作為資訊處理裝置發揮功能者，該資訊處理裝置包含：判別部，其至少判別拍攝圖像是否為藉由對非肌膚區域拍攝而得之非肌膚區域圖像，及輸出部，其於判別上述拍攝圖像為上述非肌膚區域圖像之情形時，進行所定之第1輸出。
30‧‧‧相機
31‧‧‧照明部
32‧‧‧筒部
33‧‧‧框體
34‧‧‧透鏡
35‧‧‧圖像感測器
Fa‧‧‧肌膚表面

Claims (20)

  1. 一種資訊處理裝置，其包含：判別部，其至少判別拍攝圖像是否為藉由對非肌膚區域拍攝而得之非肌膚區域圖像；及輸出部，其係於判別上述拍攝圖像為上述非肌膚區域圖像之情形時，進行與上述拍攝圖像不適合肌膚解析處理之旨意相關之所定之第1輸出。
  2. 如請求項1之資訊處理裝置，其中上述輸出部包含：反饋部，其係於判別上述拍攝圖像為上述非肌膚區域圖像之情形時，向使用者進行所定之反饋。
  3. 如請求項1之資訊處理裝置，其中上述輸出部包含：後設資料賦予部，其係於判別上述拍攝圖像為上述非肌膚區域圖像之情形時，對解析上述拍攝圖像之肌膚解析處理部輸出上述拍攝圖像為上述非肌膚區域圖像之事態。
  4. 如請求項1之資訊處理裝置，其中上述判別部算出表示上述拍攝圖像之非肌膚區域圖像相似度之評估值，並根據上述評估值是否為所定之範圍內，而判別上述拍攝圖像是否為上述非肌膚區域圖像。
  5. 如請求項4之資訊處理裝置，其中上述判別部將可自上述拍攝圖像獲得之至少與色相相關之資訊輸入至預先產生之判別函數，藉此獲得上述評估值。
  6. 如請求項1之資訊處理裝置，其中上述判別部於不同波長之光照射時拍攝之2個拍攝圖像之彼此對應之像素值的差分超過閾值之區域存在多於所定之比例之情 形時，判別上述拍攝圖像為上述非肌膚區域圖像。
  7. 如請求項1之資訊處理裝置，其中上述判別部判別連續拍攝時是否產生拍攝部位之位置偏移，且於判別產生上述位置偏移之情形時，上述輸出部進行與上述拍攝圖像不適合肌膚解析處理之旨意相關之所定之第2輸出。
  8. 如請求項7之資訊處理裝置，其中上述判別部基於連續拍攝之複數張圖像之前後所拍攝之2個圖像各者之亮度圖像的距離或類似度，而判別是否產生上述位置偏移。
  9. 如請求項7之資訊處理裝置，其中上述判別部根據所定之感測器資料之變化是否超過閾值，而判別是否產生上述位置偏移。
  10. 如請求項1之資訊處理裝置，其中上述判別部進而判別上述拍攝圖像是否於相機未密接於肌膚之狀態下被拍攝，且上述輸出部係於判別上述拍攝圖像係於上述相機未密接於上述肌膚之狀態下被拍攝之情形時，進行與上述拍攝圖像不適合肌膚解析處理之旨意相關之所定之第3輸出。
  11. 如請求項10之資訊處理裝置，其中上述判別部基於自上述拍攝圖像獲得之亮度直方圖，而判別上述拍攝圖像是否於上述相機未密接於上述肌膚之狀態下被拍攝。
  12. 如請求項11之資訊處理裝置，其中上述判別部基於自上述拍攝圖像獲得之亮度直方圖、與預先登錄之上述相機對上述肌膚未密接時之亮度直方圖及上述相機對上述肌膚密接時之亮度直方圖各者之距離差分，判別上述拍 攝圖像是否於上述相機未密接於上述肌膚之狀態下被拍攝。
  13. 如請求項1之資訊處理裝置，其中上述判別部進而判別上述拍攝圖像是否產生模糊或抖動，且於判別為上述拍攝圖像產生模糊或抖動之情形時，上述輸出部進行與上述拍攝圖像不適合肌膚解析處理之旨意相關之所定之第4輸出。
  14. 如請求項13之資訊處理裝置，其中上述判別部算出表示上述拍攝圖像中產生之模糊程度或抖動程度之評估值，並根據上述評估值是否為所定之範圍內，而判別拍攝圖像是否產生模糊或抖動。
  15. 如請求項14之資訊處理裝置，其中上述判別部將自上述拍攝圖像而得之至少頻率相關之資訊輸入至預先產生之判別函數，藉此獲得上述評估值。
  16. 如請求項14之資訊處理裝置，其中上述判別部將自上述拍攝圖像而得之至少區塊間之亮度平均值之差分輸入至預先產生之判別函數，藉此獲得上述評估值。
  17. 如請求項2之資訊處理裝置，其中上述判別部算出表示上述拍攝圖像之非肌膚區域圖像相似度之評估值，並根據上述評估值是否為所定之範圍內，而判別上述拍攝圖像是否為上述非肌膚區域圖像，且上述反饋部進行對應於上述評估值之反饋。
  18. 如請求項3之資訊處理裝置，其中上述判別部算出表示上述拍攝圖像之非肌膚區域圖像相似度之評估值，並根據上述評估值是否為所定之範圍內，而判別上述拍攝圖像是否為上述非肌膚區域圖像，且上述後設資料賦予部對上述肌膚解析處理部輸出上述評估值 或對應於上述評估值之資料。
  19. 一種資訊處理方法，其包含：至少判別拍攝圖像是否為藉由對非肌膚區域拍攝而得之非肌膚區域圖像，及於藉由處理器判別上述拍攝圖像為上述非肌膚區域圖像之情形時，進行與上述拍攝圖像不適合肌膚解析處理之旨意相關之所定之第1輸出。
  20. 一種資訊處理程式，其係用以使電腦作為資訊處理裝置發揮功能者，該資訊處理裝置包含：判別部，其至少判別拍攝圖像是否為藉由對非肌膚區域拍攝而得之非肌膚區域圖像，及輸出部，其於判別上述拍攝圖像為上述非肌膚區域圖像之情形時，進行與上述拍攝圖像不適合肌膚解析處理之旨意相關之所定之第1輸出。
TW104126865A 2014-11-12 2015-08-18 資訊處理裝置、資訊處理方法及資訊處理程式 TWI680747B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014-229891 2014-11-12
JP2014229891 2014-11-12

Publications (2)

Publication Number Publication Date
TW201617028A TW201617028A (zh) 2016-05-16
TWI680747B true TWI680747B (zh) 2020-01-01

Family

ID=55954073

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104126865A TWI680747B (zh) 2014-11-12 2015-08-18 資訊處理裝置、資訊處理方法及資訊處理程式

Country Status (5)

Country Link
US (1) US11189024B2 (zh)
KR (1) KR102503872B1 (zh)
CN (1) CN107148237B (zh)
TW (1) TWI680747B (zh)
WO (1) WO2016075978A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6582276B2 (ja) * 2017-11-07 2019-10-02 株式会社Ａｖｅｎｔｉｎｏ 頭部画像評価装置
CN110547866B (zh) * 2018-06-01 2022-01-11 福美生技有限公司 反馈式能量释放系统及其操作方法
CN110393508B (zh) * 2019-08-06 2022-08-30 中南大学湘雅医院 皮瓣图像获取方法、装置、存储介质及电子设备
JP2022163244A (ja) * 2019-09-25 2022-10-26 株式会社ニコン 解析装置、解析方法、及びプログラム
KR20210075673A (ko) * 2019-12-13 2021-06-23 삼성전자주식회사 사용자의 피부 상태를 측정하는 전자 장치와 이의 동작 방법

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3577439B2 (ja) 2000-03-21 2004-10-13 ヤーマン株式会社 レーザ光照射プローブ
WO2002014982A2 (en) * 2000-08-11 2002-02-21 Holomage, Inc. Method of and system for generating and viewing multi-dimensional images
JP3960223B2 (ja) 2002-12-27 2007-08-15 トヨタ自動車株式会社 物体認識装置および物体認識方法
JP4482021B2 (ja) 2004-01-23 2010-06-16 オリンパス株式会社 カメラ
US8154612B2 (en) * 2005-08-18 2012-04-10 Qualcomm Incorporated Systems, methods, and apparatus for image processing, for color classification, and for skin color detection
JP2007081682A (ja) * 2005-09-13 2007-03-29 Canon Inc 画像処理装置、画像処理方法、及び、情報処理装置が実行可能なプログラム
JP2007108941A (ja) * 2005-10-12 2007-04-26 Sharp Corp 機器制御装置、リモートコントローラ、機器、機器制御方法、機器制御プログラム、および機器制御プログラムを記録したコンピュータ読取り可能な記録媒体
JP2009015749A (ja) * 2007-07-09 2009-01-22 Seiko Epson Corp 画像表示装置、画像表示方法、およびプログラム
JP4683031B2 (ja) * 2007-10-17 2011-05-11 ソニー株式会社 電子機器、コンテンツ分類方法及びそのプログラム
US20090234716A1 (en) * 2008-03-17 2009-09-17 Photometria, Inc. Method of monetizing online personal beauty product selections
JP5077956B2 (ja) 2008-04-23 2012-11-21 Ｋｄｄｉ株式会社 情報端末装置
WO2010014067A1 (en) * 2008-07-31 2010-02-04 Hewlett-Packard Development Company, L.P. Perceptual segmentation of images
US8406482B1 (en) * 2008-08-28 2013-03-26 Adobe Systems Incorporated System and method for automatic skin tone detection in images
JP5216641B2 (ja) 2008-09-12 2013-06-19 株式会社モリテックス 拡大撮像装置及び撮像方法
JP4730431B2 (ja) * 2008-12-16 2011-07-20 日本ビクター株式会社 目標追尾装置
US8659622B2 (en) * 2009-08-31 2014-02-25 Adobe Systems Incorporated Systems and methods for creating and editing seam carving masks
JP5635770B2 (ja) 2009-12-24 2014-12-03 京セラ株式会社 障害物検出装置
US8406519B1 (en) * 2010-03-10 2013-03-26 Hewlett-Packard Development Company, L.P. Compositing head regions into target images
CN102741882B (zh) 2010-11-29 2015-11-25 松下电器（美国）知识产权公司 图像分类装置、图像分类方法、集成电路、模型制作装置
JP5822545B2 (ja) 2011-06-09 2015-11-24 キヤノン株式会社 画像処理装置、画像処理装置の制御方法、およびプログラム
US8879800B2 (en) * 2011-06-15 2014-11-04 Honeywell International Inc. Quality driven image processing for ocular recognition system
JPWO2013035847A1 (ja) 2011-09-09 2015-03-23 株式会社ニコン 形状測定装置、構造物製造システム、形状測定方法、構造物製造方法、形状測定プログラム、コンピュータ読み取り可能な記録媒体
US9335826B2 (en) * 2012-02-29 2016-05-10 Robert Bosch Gmbh Method of fusing multiple information sources in image-based gesture recognition system
JP2014179756A (ja) * 2013-03-14 2014-09-25 Canon Inc 画像処理装置、その制御方法、および制御プログラム
WO2015103388A1 (en) * 2014-01-02 2015-07-09 Metritrack, Inc. System and method for tracking completeness of co-registered medical image data
JP6433187B2 (ja) * 2014-08-07 2018-12-05 キヤノン株式会社 情報処理装置、その制御方法およびコンピュータプログラム
JP6664163B2 (ja) * 2015-08-05 2020-03-13 キヤノン株式会社 画像識別方法、画像識別装置及びプログラム

Also Published As

Publication number Publication date
US20170316564A1 (en) 2017-11-02
CN107148237B (zh) 2021-04-30
KR102503872B1 (ko) 2023-02-27
US11189024B2 (en) 2021-11-30
TW201617028A (zh) 2016-05-16
CN107148237A (zh) 2017-09-08
KR20170085494A (ko) 2017-07-24
WO2016075978A1 (ja) 2016-05-19

Similar Documents

Publication Publication Date Title
TWI680747B (zh) 資訊處理裝置、資訊處理方法及資訊處理程式
US8055067B2 (en) Color segmentation
US8559722B2 (en) Image recognition apparatus and method
JP4196714B2 (ja) デジタルカメラ
CN108737728B (zh) 一种图像拍摄方法、终端及计算机存储介质
JP6833415B2 (ja) 画像処理装置、画像処理方法、及びプログラム
JP2006319870A (ja) 撮影装置および方法並びにプログラム
US10331015B2 (en) Method for automatically focusing on specific movable object, photographic apparatus including automatic focus function, and computer readable storage medium for storing automatic focus function program
JP2016134803A (ja) 画像処理装置及び画像処理方法
US20100123802A1 (en) Digital image signal processing method for performing color correction and digital image signal processing apparatus operating according to the digital image signal processing method
CN110381247B (zh) 摄像装置以及摄像装置的控制方法
JP5395650B2 (ja) 被写体領域抽出装置およびその制御方法、被写体追跡装置、並びにプログラム
JP2007312206A (ja) 撮像装置及び、画像再生装置
JP5441669B2 (ja) 画像処理装置及びその制御方法
JP2007258923A (ja) 画像処理装置、画像処理方法、画像処理プログラム
US20150098649A1 (en) Image processing apparatus, image processing method, and computer-readable medium
US10140503B2 (en) Subject tracking apparatus, control method, image processing apparatus, and image pickup apparatus
CN111314608B (zh) 一种图像定焦提示方法、计算机装置及计算机可读存储介质
JP6027745B2 (ja) 画像処理装置
KR101731405B1 (ko) 컴퓨터에서 신호를 생성하기 위한 방법 및 그 장치
JP5629562B2 (ja) 画像処理装置及びその制御方法、及びプログラム
JP6870728B2 (ja) 画像処理装置、画像形成装置及び画像処理方法
JP2014165666A (ja) 画像処理装置、撮像装置及び画像処理プログラム
JP2014022826A (ja) 画像処理装置、撮像装置及び画像処理プログラム
JP2012119993A (ja) 画像処理装置及びその制御方法、及びプログラム