CN117652741A - 用于对人的身体成像的系统和方法 - Google Patents
用于对人的身体成像的系统和方法 Download PDFInfo
- Publication number
- CN117652741A CN117652741A CN202310688644.3A CN202310688644A CN117652741A CN 117652741 A CN117652741 A CN 117652741A CN 202310688644 A CN202310688644 A CN 202310688644A CN 117652741 A CN117652741 A CN 117652741A
- Authority
- CN
- China
- Prior art keywords
- imaging data
- imaging
- processing unit
- dimensional image
- person
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 180
- 238000000034 method Methods 0.000 title claims abstract description 20
- 238000012545 processing Methods 0.000 claims abstract description 73
- 230000003287 optical effect Effects 0.000 claims abstract description 16
- 238000013473 artificial intelligence Methods 0.000 claims description 23
- 238000003491 array Methods 0.000 claims description 8
- 230000005856 abnormality Effects 0.000 claims description 6
- 238000012634 optical imaging Methods 0.000 claims description 5
- 238000003331 infrared imaging Methods 0.000 claims description 4
- 238000013528 artificial neural network Methods 0.000 claims description 3
- 230000037303 wrinkles Effects 0.000 claims description 3
- 230000005670 electromagnetic radiation Effects 0.000 claims 7
- 230000005855 radiation Effects 0.000 abstract description 21
- 238000005259 measurement Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 3
- 239000013589 supplement Substances 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000037237 body shape Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 238000002604 ultrasonography Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000399 orthopedic effect Effects 0.000 description 1
- 210000003371 toe Anatomy 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000012285 ultrasound imaging Methods 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
- A61B5/0035—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for acquisition of images from more than one imaging mode, e.g. combining MRI and optical tomography
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/254—Image signal generators using stereoscopic image cameras in combination with electromagnetic radiation sources for illuminating objects
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0062—Arrangements for scanning
- A61B5/0064—Body surface scanning
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/0507—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves using microwaves or terahertz waves
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
- G01S13/862—Combination of radar systems with sonar systems
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
- G01S13/867—Combination of radar systems with cameras
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/89—Radar or analogous systems specially adapted for specific applications for mapping or imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/88—Sonar systems specially adapted for specific applications
- G01S15/89—Sonar systems specially adapted for specific applications for mapping or imaging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/80—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level
- G06V10/803—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level of input or preprocessed data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/103—Static body considered as a whole, e.g. static pedestrian or occupant recognition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2503/00—Evaluating a particular growth phase or type of persons or animals
- A61B2503/12—Healthy persons not otherwise provided for, e.g. subjects of a marketing survey
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
- A61B5/1079—Measuring physical dimensions, e.g. size of the entire body or parts thereof using optical or photographic means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
- A61B5/6889—Rooms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
- G06T2207/10012—Stereo images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Theoretical Computer Science (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Radiology & Medical Imaging (AREA)
- Computer Networks & Wireless Communication (AREA)
- Surgery (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Multimedia (AREA)
- Electromagnetism (AREA)
- Quality & Reliability (AREA)
- Geometry (AREA)
- Signal Processing (AREA)
- Dentistry (AREA)
- Acoustics & Sound (AREA)
- Artificial Intelligence (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Evolutionary Computation (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
本发明涉及用于对人的身体(11)成像的系统(10)和方法。该系统(10)包括:传感器单元(12),所述传感器单元(12)被配置为捕获所述身体的第一成像数据,其中,所述传感器单元(12)包括光学相机和/或红外相机和/或者声学成像传感器;电磁(EM)波扫描仪(14),所述EM波扫描仪(14)被配置为捕获所述身体的第二成像数据,其中,所述EM波扫描仪包括多个天线(15),所述多个天线(15)被配置为向所述身体(11)发射mm和/或cm范围内的EM辐射,以及接收所述身体(11)对所述EM辐射的反射;以及处理单元(16),所述处理单元(16)被配置为处理所述第一成像数据和所述第二成像数据,并基于所述处理生成所述身体(11)的三维图像(33)。
Description
技术领域
本发明涉及用于对人的身体成像的系统和方法,例如,以确定人的衣服尺寸。
背景技术
身体扫描仪可以用来确定人的衣服尺寸。例如,价格较低的身体扫描仪可以通过光学传感器(如相机或激光扫描仪)检测身体的形状。
然而,这种身体扫描仪的缺点是用户必须在很大程度上脱掉衣服才能进行扫描。这很耗时,而且可能会让许多用户感到不快。如果在如购物中心的对公众开放的区域使用,则需要为身体扫描仪提供单独的房间,这限制了扫描仪的应用可能性。
发明内容
因此,目的是提供一种用于对人成像的改进的系统和改进的方法。特别是,应避免上述缺点。
该目的通过说明书中提供的解决方案来实现。在说明书进一步限定了本发明的有利实现方式。
根据第一方面,本发明涉及一种用于对人的身体成像的系统。该系统包括:传感器单元,所述传感器单元被配置为捕获所述身体的第一成像数据,其中,所述传感器单元包括光学相机和/或红外相机和/或者声学成像传感器;电磁(EM)波扫描仪,所述EM波扫描仪被配置为捕获所述身体的第二成像数据,其中,所述EM波扫描仪包括多个天线,所述多个天线被配置为向所述身体发射毫米(mm)和/或厘米(cm)范围内的EM辐射,以及接收所述身体对所述EM辐射的反射;以及处理单元,所述处理单元被配置为处理所述第一成像数据和所述第二成像数据,并基于所述处理生成所述身体的三维图像。
这实现了以下优点:可以基于两种不同类型的测量来获取人的身体的3D图像。例如,传感器单元捕获人的一个或多个光学图像,这些光学图像示出了人的衣服,而EM波扫描仪捕获的图像可以包括关于衣服下的人的身体的附加信息。以这种方式,可以以高精度地确定身体的尺寸。
该系统可以形成用于扫描人的身体的身体扫描仪。特别地,人在扫描期间可以穿衣服,而不必脱掉衣服。三维图像可以显示人的身体的至少一部分,例如腿部和躯干,或者整个身体。
捕获成像数据可以是指捕获可以从其生成一个或多个图像(特别是3D图像)或视频的数据。成像数据可以是数字数据或模拟数据。成像数据可以通过相应的数据接口转发到处理器(在数字化步骤之后的模拟成像数据的情况下)。第一成像数据和/或第二成像数据可以包括或可以转换成3D成像数据,例如3D点云、3D网格、单独的3D点(3D像素)或空间中的其他3D坐标。这种转换可以由传感器单元或EM波扫描仪、和/或处理单元来执行。
第一成像数据可以是光学和/或红外和/或声学成像数据,即基于传感器单元的光学和/或者红外和/或者声学测量生成的成像数据。这里,光学成像数据是指在EM光谱的可见光范围内捕获的成像数据。光学相机是用于捕获这种光学成像数据的相机。特别地,第一成像数据示出了人所穿的衣服。第二成像数据可以是毫米(mm)和/或厘米(cm)波成像数据,即基于捕获的在EM光谱的mm和/或cm范围内的EM波反射而生成的成像数据。
处理第一成像数据和第二成像数据可以是指从第一成像数据和/或第二成像数据中提取和/或生成空间信息。处理器可以基于所述空间信息,特别是基于第一成像数据和第二成像数据之间的空间信息之间的偏差来生成三维图像。例如,处理单元可以被配置为通过使用合适的渲染技术基于所述空间信息渲染图像来生成身体的三维图像。处理单元随后可以在系统的显示器上显示渲染后的图像。
在一个实施方式中,处理单元被配置为基于第一成像数据来确定身体的衣服表面。
衣服表面可以与三维图像中被衣服覆盖的身体的(一个或多个)部分相对应。可以基于包括光学和/或红外和/或超声成像数据的第一成像数据来确定衣服表面。
在一个实施方式中,处理单元被配置为例如通过从三维图像中的衣服表面去除褶皱或折痕来使三维图像中的身体的衣服表面平滑。
在一个实施方式中,处理单元被配置为基于第一成像数据生成身体的三维图像,以及基于从第二成像数据中提取的信息来修改所述三维图像,特别是增加细节层次或去除不需要的图像部分。这实现了以下优点:可以基于两种测量来获取人的身体的精确3D图像。
在一个实施方式中,传感器单元被配置为以第一分辨率捕获第一成像数据,并且EM波扫描仪被配置为以低于第一分辨率的第二分辨率捕获第二成像数据。这实现了以下优点:可以使用较便宜的EM波扫描仪,从而降低了总系统成本。
在一个实施方式中,第二成像数据包括人的衣服以及衣服下面的人的皮肤对EM辐射的反射。
换言之,EM波扫描仪可以被配置为接收人的衣服以及所述衣服下的人的皮肤对EM辐射的反射。EM波扫描仪可以被配置为根据这两个反射(来自衣服和下面的皮肤)生成第二成像数据。这实现了以下优点:第二成像数据可以包括关于人的衣服表面以及衣服下面的人的表面的信息。
在一个实施方式中,处理单元被配置为基于第一成像数据和基于第二成像数据中人的衣服对EM辐射的反射,来生成身体的三维图像,特别是如果衣服或衣服的某些物品没有被第一成像数据完全捕获的话。这实现了以下优点:可以生成穿着衣服的人的更完整的3D图像。当生成3D图像时,第二成像数据(或其一部分)可用于补充第一成像数据。
在一个实施方式中,处理单元被配置为基于第二成像数据中人的皮肤对EM辐射的反射来确定衣服下的身体的空间坐标。这实现了以下优点:系统可以在不需要人脱掉衣服的情况下接收关于在衣服下的人的实际身体的信息。
在一个实施方式中,处理单元被配置为确定三维图像中穿着衣服的身体的表面与衣服下的身体的空间坐标之间的偏差、特别是空间偏差。这实现了以下优点:可以获得关于衣服在人身上的合身性的信息。例如,这些偏差越大,衣服在身上的合身性就越宽松。
在一个实施方式中,EM波扫描仪被配置为选择性地捕获偏差超过阈值的身体的一部分的另外的第二成像数据,其中,与第二成像数据相比,以增加的分辨率捕获这些另外的第二成像数据。
在一个实施方式中,处理单元被配置为修改或重建三维图像中偏差超过阈值的身体的部分。
例如,当修改三维图像的这些部分时,处理单元可以被配置为从身体的图像中去除折痕、褶皱或突出的衣服。以这种方式,可以确保3D图像中所示的身体与人的实际身体形状相似,并且不会因突出的衣服而过度变形。
在一个实施方式中,处理单元包括人工智能(AI)单元、特别是可训练的神经网络。
在一个实施方式中,处理单元被配置为分析身体的三维图像,以便检测医学异常。
例如,处理单元可以被配置为分析三维图像中特定身体部分或所述身体部分的一部分的尺寸,以检测医学异常。这种分析也可以由AI单元执行,AI单元可以被训练以用于检测此类异常。
在一个实施方式中,处理单元被配置为基于身体的三维图像来确定至少一个身体部分的尺寸和/或确定人的至少一个衣服尺寸。
特别地,处理单元被配置为在处理单元修改三维图像之后确定所述尺寸或衣服尺寸。
在一个实施方式中,EM波扫描仪的多个天线布置成至少两个竖直移位的天线阵列。
在一个实施方式中,传感器单元的至少一部分布置在两个竖直移位的天线阵列之间。
替选地,EM波扫描仪的天线可以布置成一个大的天线阵列。
在一个实施方式中,传感器单元和EM波扫描仪可旋转地围绕系统的限定成像区域布置。
例如,为了捕获成像数据,人站在成像区域中。通过旋转传感器单元和EM波扫描仪,可以记录来自人的所有侧面的成像数据。
在一个实施方式中,该系统还包括用于人站立的可旋转平台,并且传感器单元和EM波扫描仪相对于该平台固定布置。
平台和/或可旋转布置的传感器单元和EM波扫描仪的旋转速度可以是恒定的。然而,例如,旋转速度也可以被提高或降低,如果EM波扫描仪的分辨率提高的话。
根据第二方面,本发明涉及一种用于对人的身体成像的方法。该方法包括以下步骤:通过光学成像和/或红外成像和/或声学成像来捕获所述身体的第一成像数据;通过向所述身体发射mm和/或cm范围内的EM辐射以及通过接收所述身体对所述EM辐射的反射,来捕获第二成像数据;处理所述第一成像数据和所述第二成像数据;以及基于所述处理生成所述身体的三维图像。
以上关于根据本发明的第一方面的系统的描述相应地适用于根据本发明的第二方面的方法。
附图说明
下面将结合附图对本发明进行说明。
图1示出了根据一个实施方式的用于对人的身体成像的系统的示意图;
图2示出了根据一个实施方式的用于对人的身体成像的系统的示意图;
图3示出了根据一个实施方式的人的身体的三维图像的捕获;
图4示出了根据一个实施方式的人的身体的三维图像的捕获;以及
图5示出了根据一个实施方式的用于对人的身体成像的方法的流程图。
具体实施方式
图1示出了根据一个实施方式的用于对人的身体11成像的系统10。
系统10包括传感器单元12,该传感器单元12被配置为捕获身体11的第一成像数据,其中传感器单元12包括光学相机和/或红外相机和/或者声学成像传感器。系统10还包括EM波扫描仪14,EM波扫描仪14被配置为捕获身体的第二成像数据,其中,EM波扫描仪包括多个天线15,所述多个天线15被配置为向身体11发射mm和/或cm范围内的EM辐射,以及接收身体11对所述EM辐射的反射。系统10还包括处理单元16,处理单元16被配置为处理第一成像数据和第二成像数据,并基于所述处理生成身体11的三维图像。
系统10可以形成用于扫描人的身体、特别是穿着衣服的人的身体的身体扫描仪。
这里,捕获身体11的成像数据可以是指捕获身体11至少一部分(例如,腿部和躯干)的成像数据。由此,头部或身体的其他部分可以根据应用而省略。
光学相机、红外相机和/或声成像传感器可以形成传感器单元12的一个或多个相机单元13。例如,声学成像传感器可以是超声相机或超声传感器。传感器单元12还可以包括激光扫描仪。
EM波扫描仪14可以是mm波扫描仪和/或cm波扫描仪。EM辐射可以由EM波扫描仪14以相应波长范围内的射频(RF)信号的形式发射和/或接收。EM辐射可以是cm波或mm波辐射,并且可以在捕获第二成像数据期间至少部分穿透人的衣服。
天线15可以包括用于分别发射和接收EM辐射的发射天线和/或接收天线。
处理单元16可以通过通信线路连接到传感器单元12和EM波扫描仪14。例如,处理单元16可以是连接到传感器单元12和EM波扫描仪14的外部计算机。处理单元16包括微处理器。
(第一/第二)成像数据可以形成人的身体11的一个或多个(第一/第二)图像或(第一/第二)视频。成像数据优选地包括或者可以被转换成3D成像数据,例如3D点云。处理单元16可以配置为从该3D成像数据生成三维图像。
在一个示例中,光学相机、红外相机和/或声学成像传感器捕获身体11的多个2D图像,这些2D图像随后被传感器单元12和/或处理单元16例如通过摄影测量技术转换为3D成像数据。
处理单元16可以配置为基于第一成像数据确定身体11的衣服表面,即身体11的被衣服覆盖的(一个或多个)部分。处理单元16还可以被配置为例如通过从三维图像中的衣服表面去除褶皱或折痕而在三维图像中使身体11的衣服表面平滑。此外,处理单元16可以被配置为使用从第二成像数据中提取的信息来在三维图像中增加细节层次或去除不需要的部分。如何做到这一点的示例在下面如图3和图4所示。
图2示出了根据一个实施方式的系统10的示意图。
如图2所示,EM波扫描仪14的多个发射和/或接收天线15布置成多个竖直移位的天线阵列15a(或簇)。每个天线阵列15a可以布置在不同的高度。例如,每个天线阵列15a或簇包括96个天线。竖直布置的天线阵列15a的数量可以保持较小,以降低系统10的成本。
传感器单元12的至少一部分可以布置在两个竖直移位的天线阵列15之间。
然而,通常,EM波扫描仪14的天线15也可以布置成一个大的天线阵列,特别是竖直延伸的天线阵列。该大的天线阵列例如是通过将多个天线簇组合成一个大的天线阵列而形成的。
例如,传感器单元12包括一个或多个可以捕获图像(单拍)和/或视频的相机单元13。每个相机单元13可以包括以下中的至少一者:光学相机单元、红外相机单元、和/或声学相机单元。这些相机单元13可以布置在天线阵列15a之间。例如,天线阵列15a和相机单元13可以一个接一个地连续布置,例如,每个天线阵列15a和相机单元13形成传感器单元12和EM波扫描仪14的相应模块。天线阵列15a和相机单元13也可以布置在两个不同的竖直柱中。
传感器单元12和EM波扫描仪14的元件可以集成在如图2所示的柱中,其中,在扫描期间,人站在柱的旁边。
系统10还可以包括供人站立的可旋转的平台22或底座。传感器单元12和EM波扫描仪14相对于平台22固定布置。以这种方式,可以记录来自人的所有侧面的成像数据。
替选地,传感器单元12和EM波扫描仪14可以可旋转地围绕该系统的定义成像区域布置,例如,以对站在该定义成像区域中的人进行扫描。
平台22或传感器单元12和EM波扫描仪14的旋转速度可以是恒定的。但是,速度也可以改变。例如,在提高EM波扫描仪14的分辨率的情况下,可以降低速度。为了捕获人的身体的3D图像,平台22或传感器单元12和EM波扫描仪14可以旋转360°。
系统10还可以包括用于显示身体11的所生成的三维图像的屏幕21。屏幕21可以连接到处理单元16。
图2所示的示例性系统10还可以包括与图1中的系统10相同的部件。
图3示出了根据一个实施方式的人的身体11的三维图像33的捕获。由此,使用了如图1或图2所示的成像系统10。
如图3所示,传感器单元12,例如在可见波长范围内操作的一个或多个光学相机,可以捕获人的身体11的第一成像数据。同时(或紧接之后),EM波扫描仪14(此处由垂直堆叠的天线阵列15a示出)可以捕获身体11的第二成像数据。特别地,在捕获第一成像数据和第二成像数据期间,人可以穿着衣服。
然后,处理单元16可以处理第一成像数据和第二成像数据,并基于所述处理结果生成三维图像33。
特别地,处理单元16可以配置为确定身体的衣服表面,并在考虑所述衣服表面的同时确定身体的形状。然而,人身上突出或褶皱的衣服会使得难以确定人的正确形状。因此,EM波扫描仪14的第二成像数据可以用于补充第一成像数据。
第一成像数据可以包括人的穿着衣服的身体11的光学、IR或声学成像数据。第二成像数据可以包括mm波或cm波成像数据,其可以由人的衣服表面以及衣服下面的人的皮肤对EM辐射的反射生成。因此,第二成像数据可以包括关于人的穿衣服和不穿衣服的身体的空间信息。换言之,EM波扫描仪14可以测量衣服的位置以及人的皮肤的位置两者。在图3中,EM波扫描仪14的测量由身体11上的多个固定点31表示,所述固定点31表示EM波扫描仪14捕获的空间坐标。
处理单元16可以被配置为区分第二成像数据中表示来自衣服表面的反射的部分和第二成像数据中表示来自衣服下方的皮肤的反射的部分。例如,这可以通过将第二成像数据中捕获的3D点(例如,3D像素)的空间坐标彼此比较和/或与第一成像数据中的3D点的空间坐标进行比较来实现。与直接邻近的第二成像数据的其他3D点相比和/或与身体11上相同位置的第一成像数据的3D点相比,在空间上向内(即进入身体11)移位多于阈值的第二成像数据的3D点将被假设为表示皮肤的位置。可以假设第二成像数据的其余3D点表示衣服的表面和/或未被衣服覆盖的皮肤的表面。
EM波扫描仪14可以被配置为以比传感器单元12的一个或多个相机单元13更小的分辨率操作。例如,这意味着在捕获第二成像数据时(与第一成像数据相比)每个区域记录更少的固定点31(3D点)。使用以较小分辨率操作的EM波扫描仪14可以显著降低整个系统10的成本和复杂性。
然而,替选地,第一成像数据和第二成像数据的分辨率也可以相同,或者第二成像数据的分辨率可以高于第一成像数据的分辨率。
为了生成身体11的精确三维图像,处理单元16可以被配置为首先基于第一成像数据和第二成像数据中示出衣服对EM辐射的反射的部分来生成穿着衣服的身体的三维图像。换言之,处理单元16可以首先主要基于第一成像数据生成人的穿着衣服的身体11的三维图像33,并从而可以用第二成像数据中表示衣服对EM波的反射的部分来补充第一成像数据。这尤其适用于身体11的未被或未完全被传感器单元12捕获的部分。
此外,处理单元16可以被配置为分析第二成像数据中表示人的皮肤对EM波的反射的部分,以便确定衣服下的身体11的空间坐标。
处理单元16还可以被配置为确定三维图像中的穿着衣服的身体的表面与衣服下的身体的空间坐标之间的偏差、特别是空间偏差,这些空间坐标可以从第二成像数据中提取。以这种方式,处理单元16可以确定三维图像中的身体11是否因突出的衣服而变形。原则上,处理器还可以基于第二成像数据中来自皮肤的反射生成另外的3D图像,并且比较两个3D图像以检测偏差。
如果这些偏差超过身体11某些部分的阈值,则处理单元16可以在先前生成的三维图像中修改或重建这些身体部分,例如,通过去除或减少突出部分,或通过使三维图像中的相应身体部分平滑来修改或重建。以这种方式,可以生成三维图像33,该三维图像33与人的实际身体形状非常相似并且不会因突出的衣服而过度变形。
替选地,EM波扫描仪14也可以被配置为仅接收人的皮肤而不是衣服对EM辐射的反射。在该替选示例中,处理单元16可以被配置为首先基于第一成像数据生成穿着衣服的身体的三维图像,然后确定该三维图像中穿着衣服的身体的表面与第二成像数据中衣服下的皮肤的空间坐标之间的偏差。基于这些偏差,处理单元16可以相应地修改三维图像(例如,去除突出的衣服等)。
在另一个示例中,如图4所示,EM波扫描仪14可以被配置为提高用户的身体11的偏差超过阈值的部分的分辨率。例如,处理单元16可以检测衣服是否从身体的皮肤突出过远,例如,通过将穿着衣服的身体的3D图像与第二成像数据的一部分进行比较来进行检测。衣服的突出部分41如图4所示。该突出部分41可能是由衣服中的折痕或褶皱或者由非常厚的衣服引起的。如果检测到这种突出部分,则EM波扫描仪14使用的分辨率可以选择性地针对相应身体部分提高,如图4所示,通过增加固定点42的数量来提高。
例如,EM波扫描仪被配置为在第一步骤中,以低分辨率扫描整个身体11,以及在随后的步骤中,以增加的分辨率选择性地扫描身体11的偏差超过阈值的部分。替选地,可以使用EM波扫描仪14朝向人的当前取向来执行第二扫描。换言之,可以在“低分辨率扫描”期间识别需要以更高分辨率分析的部分,因此可以立即提高分辨率以对这些部分进行“高分辨率扫描”,从而不需要可旋转平台22或可旋转传感器单元/扫描仪14进行附加的360°旋转。原则上,也可以对人进行再次扫描,其中,以更高的分辨率扫描相应区域。
替选地,可以仅在需要的地方捕获第二成像数据。例如,如果基于第一成像数据检测到身体11的某个部分上有一层布/折痕,则可以选择性地捕获第二成像数据,以展示身体11在该相应区域的实际形状。
处理单元可以包括人工智能(AI)单元32。该AI单元32可以被配置为确定穿着衣服的表面与皮肤表面之间的偏差和/或执行三维图像33的修改,即从三维图像33的身体中去除突出部分。
AI单元32可以包括可训练的神经网络,例如生成的对抗网络(GAN)。AI单元32可以是工厂训练的。例如,AI单元32的输入层被馈送第一成像数据。AI单元32可以被配置为确定身体上衣服可能干扰身体11的实际测量的任何区域。然后,AI单元32可以基于第二成像数据进行更深入的分析。
如果需要,AI单元32可以以更高的分辨率接收第一成像数据和第二成像数据。AI单元32可以基于两个成像数据集生成三维图像33。AI单元32还可以接收第一成像数据和第二成像数据的偏差低于阈值的特定(相邻)身体部分的尺寸。基于这些数据,AI单元32可以确定三维图像33应该是什么样子。特别地,AI单元32可以对身体的不同比例之间的这种依赖性进行训练和/或知道不同身体部分的测量的标准值。
此外,处理单元16、特别是AI单元32可以被配置为分析身体11的三维图像,以提取关于身体11的另外的信息。
例如,处理单元16、特别是AI单元32,可以被配置为从三维图像33计算和输出各种身体部分的尺寸,例如身高、臂长等。例如,可以基于三维图像33确定人的至少一个身体部分的尺寸。
由此,AI单元32可以使用基于第一成像数据可以正确测量的身体部分的比例,来重建(例如,由于突出的衣服)不能被正确测量的相邻身体部分。附加地或替选地,AI单元32可以使用第二成像数据来重建不能根据第一成像数据正确测量的身体部分。可以训练AI单元32来检测和重建人类身体的形状,特别是特定身体部分或特性身体特征(例如,五个手指和五个脚趾)的形状,使得AI单元32可以基于第一成像数据和第二成像数据来执行这些身体部分的重建。
处理单元16还可以被配置为基于身体11的三维图像33来确定人的衣服尺寸。例如,系统提供的人的测量可用于检测标准化衣服尺寸,例如S、M或L。该标准化尺寸可转换为制造商的相应衣服尺寸。以这种方式,用户知道从特定制造商那里选择哪种衣服尺寸。也可以的是,标准化衣服尺寸仅针对用户的身体11的一部分来确定。因此,用户可以输入他想要获得标准化衣服尺寸的身体区域。该输入可以在系统的输入单元(例如触摸显示器)上执行。例如,如果用户想要购买新的T恤,则可以只测量和处理用户的身体11的上部。
例如,系统10可以在整形外科医师或购物中心处使用,以允许人们快速确定他们的衣服尺寸。在另一个示例中,由系统10获得的关于身体尺寸和维度的信息可以用于选择和/或制造合身的衣服。
在另一个应用示例中,处理单元16和/或AI单元32可以被配置为检测三维图像中的医学异常。例如,在身体11的某些区域增大的情况下,可以检测到某些疾病。AI单元32可以被训练以用于使用训练数据来检测这种医学异常,该训练数据包括具有和不具有异常的身体的3D图像。
当用于检测医学异常时,系统10可以安装在病床上或上方。传感器单元12和EM波扫描仪14的元件可以布置成用于对床上的患者的身体进行成像。以这种方式,可以在不移动人的情况下扫描床上的不动患者的身体以检测医学异常。
处理单元还可以被配置为分析三维图像、第一成像数据和/或第二成像数据,以用于威胁检测,例如危险物体的检测。通过将光学、红外或声学成像数据与cm/mm波成像数据相结合,系统10可以有效地检测人的衣服上方和下方的危险物体。因此,该系统可以用作安全扫描仪,例如机场的安全扫描仪。
图5示出了根据一个实施方式的用于对人的身体11成像的方法50的流程图。
方法50包括以下步骤:通过光学成像和/或红外成像和/或者声学成像捕获51身体11的第一成像数据;通过向身体11发射mm和/或cm范围内的EM辐射以及通过接收身体11对所述EM辐射的反射,来捕获52第二成像数据;处理53第一成像数据和第二成像数据;以及基于所述处理53生成54身体的三维图像。
方法50可以通过图1-图4所示的系统10中的任何一者来执行。
在本发明的范围内,上述所有特征或附图中所示的特征可以以任何有利的方式彼此组合。
Claims (19)
1.一种用于对人的身体(11)成像的系统(10),包括:
传感器单元(12),所述传感器单元(12)被配置为捕获所述身体的第一成像数据,其中,所述传感器单元(12)包括光学相机和/或红外相机和/或者声学成像传感器;
电磁波扫描仪(14),所述电磁波扫描仪(14)被配置为捕获所述身体的第二成像数据,其中,所述电磁波扫描仪包括多个天线(15),所述多个天线(15)被配置为向所述身体(11)发射毫米和/或厘米范围内的电磁辐射,以及接收所述身体(11)对所述电磁辐射的反射;以及
处理单元(16),所述处理单元(16)被配置为处理所述第一成像数据和所述第二成像数据,并基于所述处理生成所述身体(11)的三维图像(33)。
2.根据权利要求1所述的系统(10),
其中,所述处理单元(16)被配置为基于所述第一成像数据来确定所述身体(11)的衣服表面。
3.根据权利要求2所述的系统(10),
其中,所述处理单元(16)被配置为例如通过从所述三维图像(33)中的所述衣服表面去除褶皱或折痕来使所述三维图像(33)中的所述身体(11)的所述衣服表面平滑。
4.根据权利要求1至3中任一项所述的系统(10),
其中,所述处理单元(16)被配置为基于所述第一成像数据生成所述身体的所述三维图像(33),以及基于从所述第二成像数据中提取的信息来修改所述三维图像(33)、特别是增加细节层次或去除不想要的图像部分。
5.根据权利要求1至4中任一项所述的系统(10),
其中,所述传感器单元(12)被配置为以第一分辨率捕获所述第一成像数据;以及
其中,所述电磁波扫描仪(14)被配置为以低于所述第一分辨率的第二分辨率捕获所述第二成像数据。
6.根据权利要求1至5中任一项所述的系统(10),
其中,所述第二成像数据包括所述人的衣服以及所述衣服下面的所述人的皮肤对所述电磁辐射的反射。
7.根据权利要求6所述的系统(10),
其中,所述处理单元(16)被配置为基于所述第一成像数据和基于所述第二成像数据中所述人的衣服对所述电磁辐射的反射,来生成所述身体(11)的所述三维图像(33),特别是如果所述衣服或所述衣服的某些物品没有被所述第一成像数据完全捕获的话。
8.根据权利要求6或7所述的系统(10),
其中,所述处理单元被配置为基于所述第二成像数据中所述人的皮肤对所述电磁辐射的反射来确定所述衣服下的所述身体(11)的空间坐标。
9.根据权利要求8所述的系统(10),
其中,所述处理单元(16)被配置为确定所述三维图像(33)中穿着衣服的身体的表面与所述衣服下的所述身体的所述空间坐标之间的偏差、特别是空间偏差。
10.根据权利要求9所述的系统(10),
其中,所述电磁波扫描仪(14)被配置为选择性地捕获所述身体的一部分的另外的第二成像数据,对于所述身体的该部分,所述偏差超过阈值;
其中,与所述第二成像数据相比,以增加的分辨率捕获所述另外的第二成像数据。
11.根据权利要求9或10所述的系统(10),
其中,所述处理单元(16)被配置为修改或重建所述三维图像(33)中所述偏差超过所述阈值的所述身体(11)的所述部分。
12.根据权利要求1至11中任一项所述的系统(10),
其中,所述处理单元(16)包括人工智能单元(32)、特别是可训练的神经网络。
13.根据权利要求1至12中任一项所述的系统(10),
其中,所述处理单元(16)被配置为分析所述身体(11)的所述三维图像(33),以便检测医学异常。
14.根据权利要求1至13中任一项所述的系统(10),
其中,所述处理单元(16)被配置为基于所述身体(11)的所述三维图像(33)来确定至少一个身体部分的尺寸和/或确定所述人的至少一个衣服尺寸。
15.根据权利要求1至14中任一项所述的系统(10),
其中,所述电磁波扫描仪(14)的所述多个天线(15)布置成至少两个竖直移位的天线阵列(15a)。
16.根据权利要求15所述的系统(10),
其中,所述传感器单元(12)的至少一部分布置在两个所述竖直移位的天线阵列(15a)之间。
17.根据权利要求1至16中任一项所述的系统(10),
其中,所述传感器单元(12)和所述电磁波扫描仪(14)可旋转地围绕所述系统(10)的限定成像区域布置。
18.根据权利要求1至16中任一项所述的系统(10),还包括:
用于所述人站立的可旋转平台(22);
其中,所述传感器单元(12)和所述电磁波扫描仪(14)相对于所述平台固定布置。
19.一种用于对人的身体(11)成像的方法(50),包括:
通过光学成像和/或红外成像和/或声学成像来捕获(51)所述身体(11)的第一成像数据;
通过向所述身体(11)发射毫米和/或厘米范围内的电磁辐射以及通过接收所述身体(11)对所述电磁辐射的反射,来捕获(52)第二成像数据;
处理(53)所述第一成像数据和所述第二成像数据;以及
基于所述处理生成(54)所述身体(11)的三维图像(33)。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP22194022.4 | 2022-09-06 | ||
EP22194022.4A EP4335357A1 (en) | 2022-09-06 | 2022-09-06 | System and method for imaging a body of a person |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117652741A true CN117652741A (zh) | 2024-03-08 |
Family
ID=83229006
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310688644.3A Pending CN117652741A (zh) | 2022-09-06 | 2023-06-12 | 用于对人的身体成像的系统和方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20240080430A1 (zh) |
EP (1) | EP4335357A1 (zh) |
CN (1) | CN117652741A (zh) |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2146327A1 (en) * | 2008-07-17 | 2010-01-20 | Nederlandse Organisatie voor toegepast- natuurwetenschappelijk onderzoek TNO | An electromagnetic body scanning system, a method and a computer program product |
US20110317008A1 (en) * | 2010-06-29 | 2011-12-29 | Analogic Corporation | Airport/aircraft security |
WO2012119216A1 (en) * | 2011-03-09 | 2012-09-13 | Optosecurity Inc. | Method and apparatus for performing a security scan on a person |
WO2014012110A2 (en) * | 2012-07-13 | 2014-01-16 | University Of Massachusetts | Multimodal imaging for the detection of tissue structure and composition |
JP6276736B2 (ja) * | 2015-08-20 | 2018-02-07 | 海洋総合開発株式会社 | 物質識別装置 |
KR102402368B1 (ko) * | 2016-07-13 | 2022-05-25 | 네이키드 랩스 오스트리아 게엠베하 | 3d 바디 스캐너 및 바이탈 파라미터 센서들을 포함하는 스마트 바디 애널라이저 |
GB201807616D0 (en) * | 2018-05-10 | 2018-06-27 | Radio Physics Solutions Ltd | Improvements in or relating to threat classification |
-
2022
- 2022-09-06 EP EP22194022.4A patent/EP4335357A1/en active Pending
-
2023
- 2023-06-12 CN CN202310688644.3A patent/CN117652741A/zh active Pending
- 2023-06-29 US US18/216,206 patent/US20240080430A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
US20240080430A1 (en) | 2024-03-07 |
EP4335357A1 (en) | 2024-03-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220182598A1 (en) | Systems, methods and apparatuses for stereo vision and tracking | |
CN108765273B (zh) | 人脸拍照的虚拟整容方法和装置 | |
CN104508704B (zh) | 人体测量方法 | |
US9384563B2 (en) | Image processing device, method, and computer program product | |
US20160086341A1 (en) | System and method for adaptive depth map reconstruction | |
CN104813340A (zh) | 从2d图像序列导出准确身体尺寸测量的系统和方法 | |
WO2015020703A1 (en) | Devices, systems and methods of virtualizing a mirror | |
US9486146B2 (en) | Detecting tumorous breast tissue in a thermal image | |
US10055542B2 (en) | Software interface tool for breast cancer screening | |
EP3113681A1 (en) | Systems and methods for patient position monitoring | |
JP2013089252A (ja) | 映像処理方法及び装置 | |
CN104574292A (zh) | 一种ct图像的校正方法和装置 | |
JP4729188B2 (ja) | 視線検出装置 | |
US20220415002A1 (en) | Three-dimensional (3d) image modeling systems and methods for determining respective mid-section dimensions of individuals | |
CN113544738B (zh) | 人体测量数据便携式获取设备和收集人体测量数据的方法 | |
Arar et al. | Towards convenient calibration for cross-ratio based gaze estimation | |
JP7170365B2 (ja) | レーダースキャンの適用範囲および効率を改善するためのシステムおよび方法 | |
US20210077064A1 (en) | Imaging method for obtaining human skeleton | |
CN117652741A (zh) | 用于对人的身体成像的系统和方法 | |
JPH10192271A (ja) | X線ct装置及び画像処理装置 | |
CN115578789A (zh) | 脊柱侧弯检测装置、系统及计算机可读存储介质 | |
JP6584231B2 (ja) | 画像処理装置、画像処理システム、画像処理方法、及びプログラム | |
JP6614861B2 (ja) | 画像処理装置、画像処理システム、画像処理方法、及びプログラム | |
US20220120557A1 (en) | Passive body scanning | |
JP2021149691A (ja) | 画像処理システム及び制御プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |