JP2023500739A - イメージングにおける照明補償 - Google Patents
イメージングにおける照明補償 Download PDFInfo
- Publication number
- JP2023500739A JP2023500739A JP2022537389A JP2022537389A JP2023500739A JP 2023500739 A JP2023500739 A JP 2023500739A JP 2022537389 A JP2022537389 A JP 2022537389A JP 2022537389 A JP2022537389 A JP 2022537389A JP 2023500739 A JP2023500739 A JP 2023500739A
- Authority
- JP
- Japan
- Prior art keywords
- body surface
- illumination
- information
- lighting
- imaging data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000005286 illumination Methods 0.000 title claims abstract description 218
- 238000003384 imaging method Methods 0.000 title claims description 135
- 238000000034 method Methods 0.000 claims abstract description 112
- 238000012545 processing Methods 0.000 claims description 42
- 238000004458 analytical method Methods 0.000 claims description 13
- 238000012937 correction Methods 0.000 claims description 5
- 238000010606 normalization Methods 0.000 claims description 4
- 238000009826 distribution Methods 0.000 description 23
- 238000012512 characterization method Methods 0.000 description 11
- 230000036541 health Effects 0.000 description 10
- 230000003595 spectral effect Effects 0.000 description 10
- 238000005259 measurement Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 230000001815 facial effect Effects 0.000 description 6
- 230000002708 enhancing effect Effects 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 210000001061 forehead Anatomy 0.000 description 4
- 230000002411 adverse Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 230000001010 compromised effect Effects 0.000 description 3
- 238000004590 computer program Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 230000002829 reductive effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 206010000496 acne Diseases 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000008081 blood perfusion Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 238000011002 quantification Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000010998 test method Methods 0.000 description 1
- 230000036962 time dependent Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/117—Identification of persons
- A61B5/1171—Identification of persons based on the shapes or appearances of their bodies or parts thereof
- A61B5/1176—Recognition of faces
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G06T5/94—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/141—Control of illumination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/60—Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/64—Three-dimensional objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/71—Circuitry for evaluating the brightness variation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2560/00—Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
- A61B2560/02—Operational features
- A61B2560/0223—Operational features of calibration, e.g. protocols for calibrating sensors
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2576/00—Medical imaging apparatus involving image processing or analysis
- A61B2576/02—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Abstract
Description
Claims (14)
- 体表面の3次元表現、及び
基準軸に対する前記体表面の向きを示す前記3次元表現の照明情報、
を取得するステップと、
前記照明情報から明らかな照明変動を補償するために、照明補償情報を決定するステップと、
前記体表面のイメージングデータから得られた前記体表面の3次元再構成の解析に基づいて、前記体表面の前記向きを決定するステップと、
前記照明補償情報を使用して、前記体表面の画像内の前記照明変動を補償するステップと、
を含む、コンピュータ実施の方法。 - 前記照明補償情報を決定するステップは、前記体表面の複数の空間的位置を表す正規化マップを決定するステップを含み、各空間的位置は、前記画像内の前記照明変動を補正するために、前記画像の対応する空間的位置に適用するための照明補償係数に関連付けられている、請求項1に記載の方法。
- 前記照明情報は、前記体表面の複数の空間的位置を表す3次元照明マップを含み、前記3次元照明マップの各空間的位置は、照明源の特性及び前記空間的位置に関する前記照明源の相対的位置のうちの少なくとも1つを示す照明パラメータに関連付けられている、請求項1又は2に記載の方法。
- 前記体表面のイメージングデータを取得することと、前記体表面の前記向きを考慮する前記取得されたイメージングデータの解析に基づいて、前記体表面の前記空間的位置の前記照明パラメータを推定することと、
によって前記照明情報を決定するステップを含む、請求項3に記載の方法。 - 前記照明源の前記特性は、前記照明源の輝度及び前記照明源の発散のうちの少なくとも1つを含む、請求項3又は4に記載の方法。
- 前記照明補償情報を決定するステップは、
前記体表面のイメージングデータを取得するステップと、
前記取得されたイメージングデータに基づいて前記照明情報を決定するステップと、
前記照明情報から明らかな任意の照明変動を特定して、前記照明補償情報を決定するステップと、
を含む、請求項1から5のいずれか一項に記載の方法。 - 前記イメージングデータから前記照明情報を決定するステップは、
前記イメージングデータを以前に取得されたイメージングデータと比較して、前記イメージングデータが以前の時間枠で取得されているかどうかを決定するステップを含み、
前記イメージングデータが以前に取得されていない場合、前記方法は、前記イメージングデータから前記照明情報を生成し、前記イメージングデータに関連付けられている前記照明情報をメモリに保存するステップを含み、
前記イメージングデータが以前に取得されている場合、前記方法は、前記イメージングデータに関連付けられている前記照明情報を前記メモリから取得するステップを含む、請求項6に記載の方法。 - 前記体表面の前記3次元表現を取得するステップは、
前記体表面のイメージングデータを取得するステップと、
前記取得されたイメージングデータに基づいて前記3次元表現を決定するステップと、
を含む、請求項1から7のいずれか一項に記載の方法。 - 前記イメージングデータから前記3次元表現を決定するステップは、
任意の以前に特定された体表面のデータベースを保存しているメモリをチェックすることによって、前記体表面は認識可能であるかどうかを決定するステップを含み、
前記体表面が認識されない場合、前記方法は、前記イメージングデータから前記3次元表現を決定し、前記体表面に関連付けられている前記3次元表現をメモリに保存するステップを含み、
前記体表面が認識される場合、前記方法は、前記認識された体表面に関連付けられている前記3次元表現を前記メモリから取得するステップを含む、請求項8に記載の方法。 - 前記体表面は、被検者の顔面を含み、前記3次元表現は、前記顔面の3次元再構成を含む、請求項1から9のいずれか一項に記載の方法。
- 前記照明補償情報を使用して、前記体表面の前記画像内の前記照明変動を補償するステップは、
前記体表面の前記画像を取得するステップと、
前記照明補償情報を使用して、前記画像内の前記照明変動を補償するステップと、
を含む、請求項1から10のいずれか一項に記載の方法。 - 処理回路を含む装置であって、
前記処理回路は、
体表面の3次元表現、及び
基準軸に対する前記体表面の向きを示す前記3次元表現の照明情報、
を取得する取得モジュールと、
前記照明情報から明らかな照明変動を補償するために、照明補償情報を決定する決定モジュールと、
前記体表面のイメージングデータから得られた前記体表面の3次元再構成の解析に基づいて、前記体表面の前記向きを決定することと、
前記照明補償情報を使用して、前記体表面の画像内の前記照明変動を補償する補正モジュールと、
を含む、装置。 - イメージングデバイスに前記体表面の前記画像を収集させるイメージングモジュールをさらに含む、請求項12に記載の装置。
- 命令を保存している有形機械可読媒体であって、前記命令は、少なくとも1つのプロセッサによって実行されると、前記少なくとも1つのプロセッサに、
体表面の3次元表現、及び
基準軸に対する前記体表面の向きを示す前記3次元表現の照明情報、
を取得させることと、
前記照明情報から明らかな照明変動を補償するために、照明補償情報を決定させることと、
前記体表面のイメージングデータから得られた前記体表面の3次元再構成の解析に基づいて、前記体表面の前記向きを決定させることと、
前記照明補償情報を使用して、前記体表面の画像内の前記照明変動を補償させることと、を行わせる、有形機械可読媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP19218928.0A EP3838117A1 (en) | 2019-12-20 | 2019-12-20 | Illumination compensation in imaging |
EP19218928.0 | 2019-12-20 | ||
PCT/EP2020/087356 WO2021123404A1 (en) | 2019-12-20 | 2020-12-21 | Illumination compensation in imaging |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023500739A true JP2023500739A (ja) | 2023-01-10 |
JP7209132B2 JP7209132B2 (ja) | 2023-01-19 |
Family
ID=69005362
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022537389A Active JP7209132B2 (ja) | 2019-12-20 | 2020-12-21 | イメージングにおける照明補償 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20230026168A1 (ja) |
EP (2) | EP3838117A1 (ja) |
JP (1) | JP7209132B2 (ja) |
CN (1) | CN114845628A (ja) |
WO (1) | WO2021123404A1 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002157595A (ja) * | 2000-11-20 | 2002-05-31 | Nec Corp | 物体照合方法,物体照合装置,およびそのプログラムを記録した記録媒体 |
WO2008056777A1 (fr) * | 2006-11-10 | 2008-05-15 | Konica Minolta Holdings, Inc. | Système d'authentification et procédé d'authentification |
US20110182520A1 (en) * | 2010-01-25 | 2011-07-28 | Apple Inc. | Light Source Detection from Synthesized Objects |
US20150109417A1 (en) * | 2013-10-21 | 2015-04-23 | Nokia Corporation | Method, apparatus and computer program product for modifying illumination in an image |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9339194B2 (en) * | 2010-03-08 | 2016-05-17 | Cernoval, Inc. | System, method and article for normalization and enhancement of tissue images |
KR102507567B1 (ko) * | 2015-06-09 | 2023-03-09 | 삼성전자주식회사 | 이미지를 처리하는 전자 장치 및 그 제어 방법 |
US9922452B2 (en) * | 2015-09-17 | 2018-03-20 | Samsung Electronics Co., Ltd. | Apparatus and method for adjusting brightness of image |
US9585549B1 (en) * | 2016-05-26 | 2017-03-07 | Dental Smartmirror, Inc. | Avoiding dazzle from lights affixed to an intraoral mirror, and applications thereof |
US11116407B2 (en) * | 2016-11-17 | 2021-09-14 | Aranz Healthcare Limited | Anatomical surface assessment methods, devices and systems |
US11452455B2 (en) * | 2018-05-02 | 2022-09-27 | Canfield Scientific, Incorporated | Skin reflectance and oiliness measurement |
-
2019
- 2019-12-20 EP EP19218928.0A patent/EP3838117A1/en not_active Withdrawn
-
2020
- 2020-12-21 CN CN202080088419.0A patent/CN114845628A/zh active Pending
- 2020-12-21 EP EP20838066.7A patent/EP4076151B1/en active Active
- 2020-12-21 WO PCT/EP2020/087356 patent/WO2021123404A1/en unknown
- 2020-12-21 US US17/781,753 patent/US20230026168A1/en active Pending
- 2020-12-21 JP JP2022537389A patent/JP7209132B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002157595A (ja) * | 2000-11-20 | 2002-05-31 | Nec Corp | 物体照合方法,物体照合装置,およびそのプログラムを記録した記録媒体 |
WO2008056777A1 (fr) * | 2006-11-10 | 2008-05-15 | Konica Minolta Holdings, Inc. | Système d'authentification et procédé d'authentification |
US20110182520A1 (en) * | 2010-01-25 | 2011-07-28 | Apple Inc. | Light Source Detection from Synthesized Objects |
US20150109417A1 (en) * | 2013-10-21 | 2015-04-23 | Nokia Corporation | Method, apparatus and computer program product for modifying illumination in an image |
Also Published As
Publication number | Publication date |
---|---|
EP4076151A1 (en) | 2022-10-26 |
JP7209132B2 (ja) | 2023-01-19 |
EP3838117A1 (en) | 2021-06-23 |
EP4076151B1 (en) | 2023-06-21 |
WO2021123404A1 (en) | 2021-06-24 |
US20230026168A1 (en) | 2023-01-26 |
CN114845628A (zh) | 2022-08-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11026624B2 (en) | Measuring and monitoring skin feature colors, form and size | |
US11452455B2 (en) | Skin reflectance and oiliness measurement | |
US10327633B2 (en) | Computational array camera with dynamic illumination for eye tracking | |
CN108875524B (zh) | 视线估计方法、装置、系统和存储介质 | |
CN107924564B (zh) | 用于确定预定解剖特征的容积数据的方法和设备 | |
US20230263463A1 (en) | Osteoporosis diagnostic support apparatus | |
RU2628648C2 (ru) | Устройство и способ получения и обработки показаний измерений живых существ | |
CN107357429B (zh) | 用于确定视线的方法、设备和计算机可读存储介质 | |
CN103330557B (zh) | 基于曝光时间测定的激光散斑血流成像方法 | |
JP2015527625A (ja) | 身体測定 | |
JP4999731B2 (ja) | 顔画像処理装置 | |
JP6822482B2 (ja) | 視線推定装置、視線推定方法及びプログラム記録媒体 | |
Mirzaalian Dastjerdi et al. | Measuring surface area of skin lesions with 2D and 3D algorithms | |
TW202103484A (zh) | 具改善之影像擷取之用於外用劑之產生的系統及方法 | |
Peng et al. | Improved 3D lighting environment estimation for image forgery detection | |
JP2022039984A (ja) | 顔画像から眼の領域を見つけるシステム及び方法 | |
JP7209132B2 (ja) | イメージングにおける照明補償 | |
US20220335252A1 (en) | Method and system for anonymizing facial images | |
Shimokawa et al. | Computational model for human 3D shape perception from a single specular image | |
CN114979499A (zh) | 灯光调节方法及装置 | |
TW201742003A (zh) | 測量裝置及測量方法 | |
Economopoulos et al. | Automatic correspondence on medical images: A comparative study of four methods for allocating corresponding points | |
CN114450567A (zh) | 多/高光谱二维图像处理 | |
Mehta et al. | Selective quantifiable facial assessment of aging | |
JP2021061048A (ja) | 情報処理装置、情報処理方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220617 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220617 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220617 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221212 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230106 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7209132 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |