JPWO2018115346A5 - - Google Patents
Download PDFInfo
- Publication number
- JPWO2018115346A5 JPWO2018115346A5 JP2019534173A JP2019534173A JPWO2018115346A5 JP WO2018115346 A5 JPWO2018115346 A5 JP WO2018115346A5 JP 2019534173 A JP2019534173 A JP 2019534173A JP 2019534173 A JP2019534173 A JP 2019534173A JP WO2018115346 A5 JPWO2018115346 A5 JP WO2018115346A5
- Authority
- JP
- Japan
- Prior art keywords
- image
- screen
- color channel
- illumination
- predetermined
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000005286 illumination Methods 0.000 claims description 100
- 238000005259 measurement Methods 0.000 claims description 70
- 230000003595 spectral Effects 0.000 claims description 28
- 238000011156 evaluation Methods 0.000 claims description 19
- 230000003287 optical Effects 0.000 claims description 17
- 230000035945 sensitivity Effects 0.000 claims description 11
- 230000003213 activating Effects 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 5
- 230000000875 corresponding Effects 0.000 claims description 5
- 238000010801 machine learning Methods 0.000 claims description 3
- 230000001537 neural Effects 0.000 claims description 3
- 238000001228 spectrum Methods 0.000 claims description 2
- 230000000576 supplementary Effects 0.000 description 11
- 239000003086 colorant Substances 0.000 description 2
Description
照明イメージを規定する為に、以下の照明パラメータのうち１つ以上が例えば用いられ得る：
－それぞれの照明イメージを表示するとスクリーンによって発光される光のスペクトル組成、及び／又は、
－スクリーンの各カラーチャネルに関して、均一な輝度値及び／又は、
－それぞれの照明イメージで埋め尽くされるスクリーン領域、特に、スクリーン領域のサイズ及び形状、及び／又は、
－スクリーンの全イメージ領域内で、それぞれの照明イメージによって埋め尽くされるスクリーン領域の配置。
One or more of the following lighting parameters may be used, for example, to define the lighting image:
-The spectral composition of the light emitted by the screen when displaying each illumination image and / or
-Uniform brightness values and / or for each color channel on the screen
-The size and shape of the screen area filled with each illumination image, especially the screen area, and / or
-Arrangement of the screen area filled with each illumination image within the entire image area of the screen.
照明イメージそれぞれは典型的に連続している。例えば、照明イメージのうち１つ、幾つか、又はそれぞれが、スクリーンの全イメージ領域を完全に埋め尽くしてもよい。しかしながら、照明イメージのうち１つ、２つ以上又はそれぞれが、スクリーンの全イメージ領域の一部の領域のみを満たすことも可能であり、スクリーンは典型的に、照明イメージによって埋め尽くされる一部領域の外部では黒色である（即ち、光学素子はオフにされるか又は作動されず、照明しないか又は最小可能輝度のみで照明する）。照明イメージによってそれぞれ埋め尽くされるスクリーン領域は、スクリーンの全イメージ領域の例えば少なくとも１／６、１／５、１／４、１／３、１／２又はそれ以上に対応する。例えば、照明イメージシーケンスはスクリーンの全イメージ領域の概ね１／Ｒのみをそれぞれ埋め尽くすＲ照明イメージを備えてよく、Ｒは典型的に２より大きい自然数であり、例えば、２０未満である。典型的にＲは３～１０の間にある。例えば、Ｒ＝３、４、５又は６である。典型的に、照明イメージのそれぞれ埋め尽くされた部分領域は、スクリーン上で互いに重複しない。 Each of the lighting images is typically continuous. For example, one, several, or each of the illuminated images may completely fill the entire image area of the screen. However, it is also possible that one, two or more or each of the illuminated images fills only a portion of the entire image area of the screen, and the screen is typically the portion that is filled with the illuminated image. It is black outside the region (ie, the optics are turned off or inactive and are not illuminated or illuminated only with the minimum possible brightness). The screen area, each filled with an illuminated image, corresponds to, for example, at least 1/6, 1/5, 1/4, 1/3, 1/2 or more of the entire image area of the screen. For example, the illumination image sequence may comprise an R illumination image that fills approximately only approximately 1 / R of the entire image area of the screen, where R is typically a natural number greater than 2, eg, less than 20. R is typically between 3-10. For example, R = 3, 4, 5 or 6. Typically, the respective filled subregions of the illuminated image do not overlap each other on the screen.
照明イメージの埋め尽くされた部分領域は、スクリーンの全イメージ領域内の同じ位置に配置され得る。しかしながらその場合照明イメージは、典型的に、少なくともその色において互いに異なっている。代替的に、照明イメージがその色において異なっているばかりでなく、スクリーン上へのその配置において異なっていることも可能である。更に、照明イメージがその色では異ならないが、スクリーン上へのその配置のみが異なっていることも可能である。 The filled partial area of the illuminated image can be co-located within the entire image area of the screen. However, in that case the illumination images are typically different from each other, at least in their color. Alternatively, it is possible that the illumination images are not only different in their color, but also in their placement on the screen. Furthermore, it is possible that the illumination image does not differ in its color, but only its placement on the screen.
例えば、照明イメージのそれぞれ個々のイメージ内容は、単色態様で埋め尽くされた領域（典型的に、言及した部分領域を完全に埋め尽くす領域）であり得、その色は例えば、上述したように、スクリーンの基本色（例えば、赤色、緑色又は青色）又は白色のうち１つ（全カラーチャネルが同じ、好ましくは最大輝度を有する）である。 For example, each individual image content of a lighting image can be a region filled with a monochromatic embodiment (typically a region that completely fills the mentioned partial region), the color being, for example, as described above. One of the basic colors of the screen (eg, red, green or blue) or white (all color channels have the same, preferably maximum brightness).
照明イメージが同色を有し、それらのスクリーン上での位置のみが異なる場合、照明イメージは典型的に、単色態様で埋め尽くされる領域（それぞれの部分領域を完全に埋め尽くす）であり、色は例えばいずれの場合にもスクリーンの同じ基本色（例えば、赤色、緑色又は青色）又は白色である（全カラーチャネルが同じ、好ましくは最大輝度を有する）。 If the illuminated images have the same color and only their position on the screen is different, then the illuminated image is typically an area that is filled in a monochromatic mode (which completely fills each subregion) and is a color. Is, for example, the same basic color (eg, red, green or blue) or white of the screen in each case (all color channels are the same, preferably having maximum brightness).
例えば、スクリーンの全イメージ領域は、上縁、下縁、左縁及び右縁を備えてよく、照明イメージの埋め尽くされた部分領域は、スクリーンの全イメージ領域の上縁からのそれらの距離が互いに異なっており、レンズはスクリーンの全イメージ領域の上縁の上方に配置されている。 For example, the entire image area of the screen may include an upper edge, a lower edge, a left edge and a right edge, and a filled partial area of the illuminated image may have their distance from the upper edge of the entire image area of the screen. Different from each other, the lens is located above the upper edge of the entire image area of the screen.
例えば、上述のように、Ｒ照明イメージが提供されることができ、これらは、上述のように、それぞれ総スクリーン領域の１／Ｒをカバーし、典型的に互いに重複しない。それらはスクリーン上の位置において異なっており、一体となって（これらが同時に表示されるとすると）、スクリーン全体をカバーする。照明イメージの埋め尽くされた部分領域は、スクリーンの全イメージ領域の上縁へのそれらの距離において互いに異なっており、レンズはスクリーンの全イメージ領域の上縁の上方に配置されている。更に、照明イメージシーケンスは、既に上記で述べた白色イメージと黒色イメージを備え得る。すると指数ａは例えば数値的に定義されることができ、例えば１≦ａ≦Ｒ又は１≦ａ≦Ｒ＋２を満たす（白色イメージと黒色イメージで）。Ｒ＝３の「光沢測定ベクトル」Ｇ（ａ）は例えば、以下の成分を有する。 For example, as described above, R illumination images can be provided, each covering 1 / R of the total screen area and typically not overlapping each other, as described above. They differ in position on the screen and together (assuming they are displayed at the same time) cover the entire screen. The filled partial areas of the illuminated image differ from each other in their distance to the upper edge of the entire image area of the screen, and the lens is located above the upper edge of the entire image area of the screen. Further, the illumination image sequence may comprise the white and black images already mentioned above. The exponent a can then be defined numerically, for example, satisfying 1 ≦ a ≦ R or 1 ≦ a ≦ R + 2 (in a white image and a black image). The “gloss measurement vector” G (a) with R = 3 has, for example, the following components.
しかしながら、原則として、照明イメージシーケンスがスペクトル組成又は色において他とは異なる、並びに、上述のように、それぞれ埋め尽くされた部分領域の位置ａが異なっている照明イメージを備えることも可能である。例えば、上記のスペクトル指紋Ｆ（ｃ，ｄ）が各位置ａに関して取得されることができ、このカラー照明イメージは、この位置ａにおいてのみ、言及された部分領域を埋め尽くす。こうして、それぞれの物点における被測定物のスペクトル反射特性並びに光沢に関する情報を含む測定データセットＨ（ｃ，ｄ，ａ）が各物点に関して生成され得る。 However, in principle, it is also possible to include illumination images in which the illumination image sequence is different in spectral composition or color, and, as described above, the positions a of the respective filled partial regions are different. For example, the spectral fingerprint F (c, d) described above can be obtained for each position a, and this color illuminated image fills the mentioned partial region only at this position a. In this way, a measurement data set H (c, d, a) containing information on the spectral reflection characteristics and gloss of the object to be measured at each object point can be generated for each object point.
第１の照明イメージシーケンスの照明イメージ２３，２４，２５，２６，２７はそれぞれ、スクリーン７の全イメージ領域２２を完全に埋め尽くす。上述の輝度値とは別に、第１の照明イメージシーケンスは以下の照明パラメータによって規定される：
－照明イメージの総数、この場合、全三色イメージ、白色イメージ及び黒色イメージ
－照明イメージのシーケンス、この場合、例えばシーケンス赤色、緑色、青色、白色、黒色（又は基本的に任意の他の予め定められたシーケンス）
－照明イメージの表示持続時間、この例では、１００ｍｓ～２００ｍｓの範囲、例えば１５０ｍｓ
－個々の照明イメージの表示間の持続時間、この例では５ｍｓ～１０ｍｓの範囲、例えば７ｍｓ。
The illumination images 23, 24, 25, 26, 27 of the first illumination image sequence, respectively, completely fill the entire image area 22 of the screen 7. Apart from the brightness values described above, the first illumination image sequence is defined by the following illumination parameters:
-Total number of illumination images, in this case all three color images, white and black images-Sequence of illumination images, in this case sequence red, green, blue, white, black (or basically any other predetermined) Sequence)
-Display duration of the illuminated image, in this example in the range of 100 ms to 200 ms, eg 150 ms
-Duration between displays of individual lighting images, in this example in the range of 5 ms to 10 ms, eg 7 ms.
第１、第２及び第３の照明イメージ２８、２９、３０はそれぞれ連続しており、各々スクリーン７の全イメージ領域２２の部分領域３３のみをフィルする。例えば、それぞれ埋め尽くされた部分領域３３内のスクリーン７の光学素子は、各カラーチャネル内で最大可能輝度値で作動される。それぞれ埋め尽くされた部分領域３３外では、光学素子はオフにされて作動されず、因って照明しない、又は最小可能輝度でのみ照明する。照明イメージのそれぞれ埋め尽くされた部分領域３３はスクリーン７上で互いに重複しない。照明イメージによってそれぞれ埋め尽くされた部分領域３３は、この例においてスクリーン７の全イメージ領域２２の１／３に相当する。しかしながら代替的に、照明イメージシーケンスは他の数のそのような照明イメージを備えてもよく、例えば、スクリーンの全イメージ領域の１／Ｒのみをそれぞれ埋め尽くすＲ照明イメージを備えてもよく、Ｒは例えば３より大きく２０未満である自然数である。 The first, second, and third illumination images 28, 29, and 30 are continuous, and each fill only a partial area 33 of the entire image area 22 of the screen 7. For example, the optical element of the screen 7 in each filled partial region 33 is operated at the maximum possible luminance value in each color channel. Outside each of the filled partial regions 33, the optics are turned off and inoperable, thus not illuminating or illuminating only with the minimum possible brightness. The filled partial regions 33 of the illumination image do not overlap each other on the screen 7. The partial area 33, which is filled with the illumination image, corresponds to 1/3 of the total image area 22 of the screen 7 in this example. However, instead, the illumination image sequence may include a number of other such illumination images, eg, an R illumination image that fills only 1 / R of the entire image area of the screen, respectively. Is, for example, a natural number greater than 3 and less than 20.
第１、第２及び第３の照明イメージ２８，２９，３０の埋め尽くされた部分領域３３は、スクリーン７上でのそれらの配置において異なっている。示された図において、スクリーン７の全イメージ領域２３は、上縁３４、下縁３５、左縁３６及び右縁３７を有する。照明イメージ２８，２９，３０の埋め尽くされた部分領域３３は、上縁３４からのそれらの距離が異なっており、従って、スクリーン７の全イメージ領域２３の上縁３４の上方に配置されたカメラ５のレンズ１８から距離も異なっている。 The filled partial areas 33 of the first, second and third illumination images 28, 29, 30 are different in their arrangement on the screen 7. In the figure shown, the entire image area 23 of the screen 7 has an upper edge 34, a lower edge 35, a left edge 36 and a right edge 37. The filled partial areas 33 of the illumination images 28, 29, 30 differ in their distance from the top edge 34 and are therefore a camera located above the top edge 34 of the entire image area 23 of the screen 7. The distance from the lens 18 of 5 is also different.
上記で規定した輝度値とは別に、第２の照明イメージは以下の更なる照明パラメータによって規定される；
－照明イメージの総数、この場合、スクリーン７の部分領域３３のみをそれぞれ埋め尽くす３つの白色照明イメージ並びに１つの白色イメージと１つの黒色イメージ
－照明イメージのシーケンス、この場合、例えば第１、第２、第３の照明イメージ、白色イメージ３１、黒色イメージ３２シーケンス（又は基本的に任意の他の予め定められたシーケンス）、
－照明イメージの表示持続時間、この例では、１００ｍｓ～２００ｍｓの範囲、例えば１５０ｍｓ
－個々の照明イメージの表示間の時間間隔、この例では５ｍｓ～１０ｍｓの範囲、例えば７ｍｓ。
Apart from the brightness values defined above, the second illumination image is defined by the following additional illumination parameters;
-Total number of illuminated images, in this case three white illuminated images and one white image and one black image, each filling only a partial area 33 of the screen 7.-A sequence of illuminated images, in this case, eg, first, second. , Third Illumination Image, White Image 31, Black Image 32 Sequence (or essentially any other predetermined sequence),
-Display duration of the illuminated image, in this example in the range of 100 ms to 200 ms, eg 150 ms
-Time intervals between displays of individual lighting images, in this example in the range of 5 ms to 10 ms, eg 7 ms.
原則として、任意の付加的な数の更なる照明イメージシーケンスが規定されることができ、これらはそれぞれのアプリケーションケースに適合される、即ち、それぞれの被測定物と、調査される被測定物のそれぞれの特性に適合される。既に上記で説明したように、照明イメージシーケンスは、スクリーン上のそれらの位置ａ並びにそれらの色において互いに異なっている照明イメージを備え得る。例えば、前述のスペクトル指紋Ｆ（ｃ，ｄ）が各位置ａに関して取得されることができ、カラー照明イメージは、対応する位置における言及した部分領域３３のみを埋め尽くす。こうして、例えば前述の測定データセットＨ（ｃ，ｄ，ａ）が各物点に関して生成されることができ、この測定データセットは、スペクトル反射特性並びにそれぞれの物点における被測定物の光沢に関する情報を含む。 In principle, any additional number of additional illumination image sequences can be specified, which are adapted to each application case, i.e., each object to be measured and the object to be investigated. It is adapted to each characteristic. As already described above, illumination image sequences may include illumination images that differ from each other in their position a on the screen as well as their colors. For example, the spectral fingerprint F (c, d) described above can be obtained for each position a and the color illumination image fills only the mentioned partial region 33 at the corresponding position. Thus, for example, the measurement data set H (c, d, a) described above can be generated for each object point, and this measurement data set contains information on the spectral reflection characteristics and the gloss of the object to be measured at each object point. including.
取り分け、提案される方法に関して以下の実施例が説明される。
１．本明細書で提案されるタイプのシステムで被測定物の測定イメージをキャプチャする方法であって、
－制御ユニットによって、所定の照明イメージシーケンスの幾つかの異なる照明イメージを順次表示するようにモバイル電子機器のスクリーンを作動させるステップと、
－所定の照明イメージシーケンスの各照明イメージの表示と同時に、被測定物の測定イメージをキャプチャするようにモバイル電子機器のカメラを作動させるステップと、を含む方法。
２．例１に記載の方法であって、モバイル電子機器のスクリーンが幾つかのカラーチャネルを備え、スクリーンが、カラーチャネルそれぞれに関してチャネル固有のスペクトル発光特性を有し、スクリーンが、グリッド内に配置された複数の光学素子を備え、カラーチャネルそれぞれは、そのスペクトル発光特性がそれぞれのカラーチャネルのチャネル固有のスペクトル発光特性に対応する、スクリーンの光学素子のサブセットによって形成される方法。
３．例２に記載の方法であって、更に、
－スクリーンの単一のカラーチャネルのみの光学素子を作動させ、このカラーチャネルの全ての作動された光学素子を、このカラーチャネルに関して予め定められた均一な輝度値で作動させることによって、又は、
－幾つかのカラーチャネルの光学素子を作動させ、全ての作動された光学素子を、それぞれのカラーチャネルに関して予め定められた均一な輝度値で作動させることによって、
－１つ以上のカラーチャネルの光学素子を作動させ、全ての作動された光学素子を、それぞれのカラーチャネルに関して予め定められた勾配をもって作動させることによって、
所定の照明イメージシーケンスのうち１つ以上の照明イメージを表示するようにモバイル電子機器のスクリーンを作動させることを含む方法。
４．例２又は３のうちいずれかに記載の方法であって、モバイル電子機器のスクリーンが赤色カラーチャネル、緑色カラーチャネル及び青色カラーチャネルを備え、照明シーケンスが赤色照明イメージ、緑色照明イメージ及び青色照明イメージを備え、方法が、
－スクリーンの赤色カラーチャネルのみの光学素子を作動させ、赤色カラーチャネルの全ての作動された光学素子を、赤色カラーチャネルに関して予め定められた均一な輝度値で作動させることによって赤色照明イメージを表示し、
－スクリーンの緑色カラーチャネルのみの光学素子を作動させ、緑色カラーチャネルの全ての作動された光学素子を、緑色カラーチャネルに関して予め定められた均一な輝度値で作動させることによって緑色照明イメージを表示し、及び／又は、
－スクリーンの青色カラーチャネルのみの光学素子を作動させ、青色カラーチャネルの全ての作動された光学素子を、青色カラーチャネルに関して予め定められた均一な輝度値で作動させることによって青色照明イメージを表示する、
ようにスクリーンを作動させることを含む方法。
５．例１乃至４に記載の方法において、所定の照明イメージシーケンスの各照明イメージのうち以下のイメージ特性の１つ以上が予め定められている：
－それぞれの照明イメージを表示したときにスクリーンによって発光される光のスペクトル組成、及び／又は、
－スクリーンの各カラーチャネルに関して、例２乃至４のうちいずれか１つにこの例が戻って関連する限りの、均一な輝度値、及び／又は、
－それぞれの照明イメージによって埋め尽くされるスクリーン領域、及び／又は、
－スクリーンの全イメージ領域内でそれぞれの照明イメージによって埋め尽くされるスクリーン領域の配置。
６．例１乃至５に記載の方法であって、照明イメージそれぞれはスクリーンの全イメージ領域の部分領域のみを埋め尽くし、照明イメージの埋め尽くされた部分領域は、スクリーンの全イメージ領域上でのそれらの配置において互いに異なっている、方法。
７．例６に記載の方法であって、スクリーンの全イメージ領域は上縁、下縁、左縁及び右縁を備え、照明イメージの埋め尽くされた部分領域は、スクリーンの全イメージ領域の上縁からのそれらの距離において互いに異なっており、レンズはスクリーンの全イメージ領域の上縁の上方に配置されている、方法。
８．例１乃至７に記載の方法であって、システムは、所定の照明イメージシーケンスを部分的に又は完全に規定する照明パラメータが記憶されている少なくとも１つのデータメモリを備え、方法が、
－少なくとも１つのデータメモリに記憶された照明パラメータをデータメモリから検索し、
－検索された照明パラメータに基づいて所定の照明イメージシーケンスを決定する、
ことを含む、方法。
９．例１乃至８に記載の方法であって、モバイル電子機器のカメラが幾つかの異なるカラーチャネルを備え、カメラは、カラーチャネルそれぞれに関してチャネル固有のスペクトル感度を有し、カメラはグリッドで配置された複数のセンサ素子を備えたイメージセンサを備え、カメラのカラーチャネルそれぞれは、そのスペクトル感度がカメラのそれぞれのカラーチャネルのチャネル固有の感度に対応するイメージセンサのセンサ素子のサブセットによって形成される、方法。
１０．モバイル電子機器のカメラは赤色カラーチャネル、緑色カラーチャネル及び青色カラーチャネルを備えている、例９に記載の方法。
１１．例１乃至１０のいずれかに記載の方法であって、測定イメージそれぞれは複数の像点並びに像点に割り当てられたイメージデータを備え、方法が、
－測定イメージの像点をマージし、
－マージされた像点のイメージデータを、それぞれのマージされた像点の測定データセットにグループ化する、ことを含む方法。
１２．例１１に記載の方法であって、測定イメージの像点は、測定イメージ（３９）のイメージレジストレーションによって纏められる方法。
１３．例１１及び１２のうちいずれかに記載の方法であって、測定データセットは、機械学習によって較正又は訓練されたアルゴリズムによって評価される方法。
１４．例１３に記載の方法であって、アルゴリズムは、モニタされた学習方法によって、又は、モニタされない学習方法によって訓練されている方法。
１５．例１１乃至１４のうちいずれかに記載の方法であって、測定データセットは分類方法によって評価される方法。
１６．例１１乃至１５のいずれかに記載の方法であって、測定データセットは人工ニューラルネットワークによって評価される方法。
１７．例１１乃至１６のいずれかに記載の方法であって、
－測定データセットそれぞれを少なくとも１つの予め定められた基準データセットと比較することを含む方法。
１８．例１１乃至１７のいずれかに記載の方法であって、
－カメラのスペクトル感度とスクリーンのスペクトル発光特性を考慮に入れながら測定データセットからの被測定物の少なくとも１つの反射特性を決定することを含む、方法。
１９．例１１乃至１８のいずれかに記載の方法であって、
－被測定物の決定された少なくとも１つの反射特性を、少なくとも１つの予め定められた基準反射特性と比較する、ことを含む方法。
２０．例２乃至５のうち１つ及び例９又は１０のうち１つと組み合わせた、例１１乃至１９のうちいずれかに記載の方法であって、スクリーンがＭ個のカラーチャネルを備えカメラがＮ個のカラーチャネルを備え、Ｍ＞１であってＮ＞１であり、各測定データセットが少なくともＭ×Ｎ測定値を備え（Ｆ（ｄ，ｃ）、１≦ｄ≦Ｍであり１≦ｃ≦Ｎ）、Ｍ×Ｎ測定値は、カメラのカラーチャネルとのスクリーンのカラーチャネルのＭ×Ｎの異なる組み合わせに対応する方法。
２１．例１乃至２０のいずれかに記載の方法であって、モバイル電子機器はユーザインターフェースを備え、方法は更に、
－所定の照明イメージシーケンスをユーザインターフェースを介して設定又は指定する、及び／又は、
－ユーザインターフェースを介して異なる所定の照明イメージシーケンス間で選択する、及び／又は、
－ユーザインターフェースを介して、異なる被測定物間で、及び／又は関心対象の被測定物の異なる特性間で選択し、被測定物及び／又は関心対象の特性のなされた選択に則して、幾つかの記憶された所定の照明イメージシーケンス間で、所定の照明イメージシーケンスを選択する（例えば、モバイル機器の制御ユニットによって自動的に）、ことを含む方法。
２２．例１乃至２１のいずれかに記載の方法であって、
－較正規準の測定イメージをキャプチャし、
－較正規準の測定イメージと、較正規準に属する記憶された基準データセットとを用いながらモバイル機器を較正し、特に、モバイル機器のカメラ及び／又は較正スクリーンを較正する、ことを含む方法。
２３．スクリーンはタッチスクリーンとして設計されている例１乃至２２のいずれかに記載の方法。
２４．モバイル電子機器はスマートフォン又はタブレットコンピュータである、例１乃至２３のいずれかに記載の方法。
In particular, the following examples will be described with respect to the proposed method.
1. 1. A method of capturing a measurement image of an object under test with a system of the type proposed herein.
-A step in which the control unit activates the screen of a mobile electronic device to sequentially display several different lighting images in a given lighting image sequence.
-A method that includes, at the same time as displaying each illumination image in a given illumination image sequence, the step of activating the camera of the mobile electronic device to capture the measurement image of the object to be measured.
2. 2. In the method of Example 1, the screen of a mobile electronic device comprises several color channels, the screen has channel-specific spectral emission characteristics for each color channel, and the screen is arranged in a grid. A method of having multiple optics, each of which is formed by a subset of screen optics, each of which has its spectral emission characteristics corresponding to the channel-specific spectral emission characteristics of each color channel.
3. 3. The method according to Example 2, further.
-By operating the optics of only a single color channel of the screen and operating all the activated optics of this color channel with a predetermined uniform brightness value for this color channel, or.
-By operating the optics of several color channels and operating all the activated optics with a predetermined uniform brightness value for each color channel.
-By operating the optics of one or more color channels and operating all the activated optics with a predetermined gradient for each color channel.
A method comprising activating the screen of a mobile electronic device to display one or more lighting images in a given lighting image sequence.
4. The method according to any one of Examples 2 or 3, wherein the screen of the mobile electronic device includes a red color channel, a green color channel, and a blue color channel, and the lighting sequence is a red lighting image, a green lighting image, and a blue lighting image. And how to
-Displays a red illumination image by activating only the red color channel optics of the screen and operating all activated optics of the red color channel with a predetermined uniform brightness value for the red color channel. ,
-Displays a green illumination image by activating only the green color channel optics of the screen and operating all activated optics of the green color channel with a predetermined uniform brightness value for the green color channel. , And / or
-Display a blue illumination image by activating only the blue color channel optics of the screen and operating all the activated optics of the blue color channel with a predetermined uniform brightness value for the blue color channel. ,
Methods that include activating the screen.
5. In the method according to Examples 1 to 4, one or more of the following image characteristics of each illumination image in a predetermined illumination image sequence are predetermined:
-The spectral composition of the light emitted by the screen when displaying each illumination image and / or
-For each color channel on the screen, uniform brightness values and / or, as long as this example is back and relevant to any one of Examples 2-4.
-Screen area filled with each illumination image and / or
-Arrangement of the screen area that is filled with each illumination image within the entire image area of the screen.
6. In the method according to Examples 1 to 5, each of the illumination images fills only a partial area of the entire image area of the screen, and the filled partial areas of the illumination image are those on the entire image area of the screen. The methods that are different from each other in the arrangement of.
7. In the method of Example 6, the entire image area of the screen comprises an upper edge, a lower edge, a left edge and a right edge, and the filled partial area of the illuminated image is from the upper edge of the entire image area of the screen. Different from each other in their distance, the lens is located above the upper edge of the entire image area of the screen, the method.
8. The method of Examples 1-7, wherein the system comprises at least one data memory in which lighting parameters that partially or completely define a given lighting image sequence are stored.
-Search the data memory for lighting parameters stored in at least one data memory.
-Determine a given lighting image sequence based on the searched lighting parameters,
The method, including that.
9. In the method of Examples 1-8, the camera of the mobile electronic device has several different color channels, the camera has channel-specific spectral sensitivity for each color channel, and the cameras are arranged in a grid. A method comprising an image sensor with multiple sensor elements, each color channel of a camera being formed by a subset of the sensor elements of the image sensor whose spectral sensitivity corresponds to the channel-specific sensitivity of each color channel of the camera. ..
10. The method of Example 9, wherein the camera of the mobile electronic device comprises a red color channel, a green color channel and a blue color channel.
11. The method according to any one of Examples 1 to 10, wherein each measurement image includes a plurality of image points and image data assigned to the image points, and the method is as follows.
-Merge the image points of the measurement image and
-A method that includes grouping the image data of merged image points into a measurement data set of each merged image point.
12. The method according to Example 11, wherein the image points of the measurement image are collected by the image registration of the measurement image (39).
13. A method according to any of Examples 11 and 12, wherein the measurement data set is evaluated by an algorithm calibrated or trained by machine learning.
14. The method of Example 13, wherein the algorithm is trained by a monitored learning method or by an unmonitored learning method.
15. The method according to any one of Examples 11 to 14, wherein the measurement data set is evaluated by the classification method.
16. The method according to any one of Examples 11 to 15, wherein the measurement data set is evaluated by an artificial neural network.
17. The method according to any one of Examples 11 to 16.
-A method comprising comparing each measurement data set with at least one predetermined reference data set.
18. The method according to any one of Examples 11 to 17.
-A method comprising determining at least one reflection characteristic of an object under test from a measurement data set, taking into account the spectral sensitivity of the camera and the spectral emission characteristics of the screen.
19. The method according to any one of Examples 11 to 18.
-A method comprising comparing at least one determined reflection characteristic of an object under test with at least one predetermined reference reflection characteristic.
20. The method according to any one of Examples 11 to 19, which is combined with one of Examples 2 to 5 and one of Examples 9 or 10, wherein the screen has M color channels and N cameras. It comprises a color channel, M> 1 and N> 1, and each measurement data set has at least an M × N measurement (F (d, c), 1 ≦ d ≦ M, 1 ≦ c ≦ N. ), The M × N measurement is a method corresponding to different combinations of M × N of the color channel of the camera and the color channel of the screen.
21. The method according to any one of Examples 1 to 20, wherein the mobile electronic device is provided with a user interface, and the method is further described.
-Set or specify a given illumination image sequence via the user interface and / or
-Select between different predetermined lighting image sequences via the user interface and / or
-Select between different objects under test and / or between different properties of the object of interest via the user interface, according to the selection made of the properties of the object and / or the object of interest. A method comprising selecting a predetermined lighting image sequence (eg, automatically by a control unit of a mobile device) among several stored predetermined lighting image sequences.
22. The method according to any one of Examples 1 to 21.
-Capture the measurement image of the calibration standard and
-A method comprising calibrating a mobile device with a measurement image of the calibration standard and a stored reference data set belonging to the calibration standard, in particular calibrating the camera and / or calibration screen of the mobile device.
23. The method according to any of Examples 1 to 22, wherein the screen is designed as a touch screen.
24. The method according to any of Examples 1 to 23, wherein the mobile electronic device is a smartphone or tablet computer.
更に、機器２の較正モードは、モバイル機器２のユーザインターフェース１６を介して作動され得る。モバイル機器２の制御ユニット８及び評価ユニット１３は、言及した較正モードでの較正規準の測定イメージをキャプチャして評価するように構成される。このキャプチャの為、較正規準はユーザによってカメラ６の観測領域２０内に保持される。説明したように、スペクトルチャネルＳｋの値は、評価ユニット１３によって測定イメージから計算され、次にこの較正規準に属しておりモバイル機器２のデータメモリ９に記憶されている基準データセットと比較される。変数Ｄｄ（λ）及びＣｃ（λ）の値は、この比較に基づいて自動的に再計算されて、更なる測定に備えてデータメモリ９に記憶される。
〔付記１〕
モバイル電子機器（２）を備えた、被測定物の測定イメージをキャプチャする為のシステム（１）であって、前記モバイル電子機器（２）が、
－ハウジング（５）と、
－前記ハウジング（５）内に一体化されたカメラ（６）であって、前記カメラ（６）の観測領域（２０）内で被測定物（３８）の測定イメージ（３９）をキャプチャする為のカメラ（６）と、
－イメージの発光表示の為の、前記ハウジング（５）に一体化されたスクリーン（７）であって、前記カメラ（６）の観測領域（２０）に面しているスクリーン（７）と、
－前記ハウジング（５）内に一体化され、前記モバイル電子機器（２）のスクリーン（７）を、所定の照明イメージシーケンスの幾つかの異なる照明イメージ（２３）を順次表示するように作動させるように構成された制御ユニット（８）であって、所定の照明イメージシーケンスの各照明イメージ（２３）の表示と同時に、被測定物の測定イメージ（３９）をキャプチャさせるように前記モバイル電子機器（２）の前記カメラ（６）を作動させるように構成された制御ユニット（８）と、を備えたシステム（１）。
〔付記２〕
付記１に記載のシステム（１）であって、前記モバイル電子機器（２）のスクリーン（７）が幾つかのカラーチャネルを備え、前記スクリーン（７）が前記カラーチャネルそれぞれにおいてチャネル固有のスペクトル発光特性を有し、前記スクリーン（７）はグリッドに配置された複数の光学素子を備え、前記カラーチャネルそれぞれは、そのスペクトル発光特性が、それぞれのカラーチャネルのチャネル固有のスペクトル発光特性に対応する、前記スクリーン（７）の光学素子のサブセットによって形成されることを特徴とするシステム（１）。
〔付記３〕
付記２に記載のシステム（１）であって、前記モバイル電子機器（２）の前記制御ユニット（８）が、
－前記スクリーン（７）の単一のカラーチャネルのみの光学素子を作動させ、このカラーチャネルの全ての作動された光学素子を、このカラーチャネルに関して予め定められた均一な輝度値で作動させることによって、又は、
－幾つかのカラーチャネルの光学素子を作動させ、全ての作動された光学素子を、それぞれのカラーチャネルに関して予め定められた均一な輝度値で作動させることによって、又は、
－１つ以上のカラーチャネルの光学素子を作動させ、全ての作動された光学素子を、それぞれのカラーチャネルに関して予め定められた勾配をもって作動させることによって、
所定の照明イメージシーケンスの照明イメージ（２３）の１つ以上を表示するように前記モバイル電子機器（２）のスクリーン（７）を作動させるように構成されていることを特徴とするシステム（１）。
〔付記４〕
付記２又は３のうちいずれか一項に記載のシステム（１）であって、
前記モバイル電子機器（２）のスクリーン（７）が赤色カラーチャネル、緑色カラーチャネル及び青色カラーチャネルを備え、前記照明シーケンスが赤色照明イメージ（２３）、緑色照明イメージ（２４）及び青色照明イメージ（２５）を備え、前記モバイル電子機器（２）の制御ユニット（８）が、
－前記スクリーン（７）の赤色カラーチャネルのみの光学素子を作動させ、前記赤色カラーチャネルの全ての作動された光学素子を、前記赤色カラーチャネルに関して予め定められた均一な輝度値で作動させることによって赤色照明イメージ（２３）を表示し、
－前記スクリーン（７）の緑色カラーチャネルのみの光学素子を作動させ、前記緑色カラーチャネルの全ての作動された光学素子を、前記緑色カラーチャネルに関して予め定められた均一な輝度値で作動させることによって緑色照明イメージ（２４）を表示し、及び／又は、
－前記スクリーン（７）の青色カラーチャネルのみの光学素子を作動させ、前記青色カラーチャネルの全ての作動された光学素子を、前記青色カラーチャネルに関して予め定められた均一な輝度値で作動させることによって青色照明イメージ（２５）を表示する、
ように前記スクリーン（７）を作動させることを特徴とするシステム（１）。
〔付記５〕
付記１乃至４に記載のシステム（１）であって、所定の照明イメージシーケンスの各照明イメージ（２３）のうち以下のイメージ特性：
－それぞれの照明イメージを表示したときに前記スクリーン（７）によって発光される光のスペクトル組成、及び／又は、
－前記スクリーン（７）の各カラーチャネルに関して、付記２乃至４のうちいずれか一項にこの付記が戻って関連する限りの、均一な輝度値、及び／又は、
－それぞれの照明イメージ（２８，２９，３０）によってフィルアウトされるスクリーン領域、及び／又は、
－前記スクリーン（７）の全イメージ領域（２２）内でそれぞれの照明イメージ（２８，２９，３０）によってフィルアウトされるスクリーン領域の配置、
のうち１つ以上が予め定められているシステム（１）。
〔付記６〕
付記１乃至５のいずれか一項に記載のシステム（１）であって、前記照明イメージそれぞれは前記スクリーン（７）の全イメージ領域の部分領域（３３）のみをフィルアウトし、前記照明イメージのフィルアウトされた部分領域（３３）は、前記スクリーン（７）の全イメージ領域上でのそれらの配置において互いに異なっていることを特徴とするシステム（１）。
〔付記７〕
付記６に記載のシステム（１）であって、前記スクリーン（７）の全イメージ領域は上縁（３４）を備え、前記照明イメージのフィルアウトされた部分領域（３３）は、前記スクリーン（７）の全イメージ領域の前記上縁（３４）からのそれらの距離において互いに異なっており、前記レンズは前記スクリーン（７）の全イメージ領域の前記上縁（３４）の上方に配置されていることを特徴とするシステム（１）。
〔付記８〕
付記１乃至７に記載のシステム（１）であって、前記システム（１）は、所定の照明イメージシーケンスを部分的に又は完全に規定する照明パラメータが記憶されている少なくとも１つのデータメモリ（９，１１）を備え、前記モバイル機器（２）の制御ユニット（８）が、前記少なくとも１つのデータメモリ（９，１１）に記憶された照明パラメータを前記データメモリ（９，１１）から検索し、前記検索された照明パラメータに基づいて所定の照明イメージシーケンスを決定するように構成されていることを特徴とするシステム（１）。
〔付記９〕
付記１乃至８に記載のシステム（１）であって、前記モバイル電子機器（２）のカメラ（６）が幾つかの異なるカラーチャネルを備え、前記カメラ（６）は、カラーチャネルそれぞれに関してチャネル固有のスペクトル感度を有し、前記カメラ（６）はグリッドで配置された複数のセンサ素子を備えたイメージセンサを備え、前記カメラ（６）のカラーチャネルそれぞれは、そのスペクトル感度が前記カメラ（６）のそれぞれのカラーチャネルのチャネル固有の感度に対応するイメージセンサのセンサ素子のサブセットによって形成されることを特徴とするシステム（１）。
〔付記１０〕
前記モバイル電子機器（２）のカメラ（６）は赤色カラーチャネル、緑色カラーチャネル及び青色カラーチャネルを備えていることを特徴とする付記９に記載のシステム（１）。
〔付記１１〕
付記１乃至１０のいずれか一項に記載のシステム（１）であって、前記測定イメージ（３９）それぞれは複数の像点（４０）並びに前記像点（４０）に割り当てられたイメージデータを備え、前記システム（１）が、前記測定イメージ（３９）の像点（４０）をマージし、前記マージされた像点のイメージデータを、それぞれのマージされた像点（４０）の測定データセットにグループ化するように構成された評価ユニット（１３，１４）を備えていることを特徴とするシステム（１）。
〔付記１２〕
付記１１に記載のシステム（１）であって、前記評価ユニット（１３，１４）は、前記測定イメージ（３９）の像点（４０）を前記測定イメージ（３９）のイメージレジストレーションによってマージするように構成されていることを特徴とするシステム（１）。
〔付記１３〕
付記１１及び１２のうちいずれか一項に記載のシステム（１）であって、前記評価ユニット（１３，１４）は、測定データセットを、機械学習によって較正又は訓練されたアルゴリズムによって評価するように構成されているシステム（１）。
〔付記１４〕
付記１３に記載のシステム（１）であって、前記アルゴリズムは、モニタされた学習方法によって、又は、モニタされない学習方法によって訓練されていることを特徴とするシステム（１）。
〔付記１５〕
付記１１乃至１４のうちいずれか一項に記載のシステム（１）であって、前記評価ユニット（１３，１４）は、前記測定データセットを分類方法によって評価するように構成されていることを特徴とするシステム（１）。
〔付記１６〕
付記１１乃至１５のいずれか一項に記載のシステム（１）であって、前記評価ユニット（１３，１４）は、前記測定データセットを人工ニューラルネットワークによって評価するように構成されているシステム（１）。
〔付記１７〕
付記１１乃至１６のいずれか一項に記載のシステム（１）であって、前記評価ユニット（１３，１４）は、測定データセットそれぞれを少なくとも１つの予め定められた基準データセットと比較するように構成されているシステム（１）。
〔付記１８〕
付記１１乃至１７のいずれか一項に記載のシステム（１）であって、前記評価ユニット（１３，１４）は、前記カメラ（６）のスペクトル感度と前記スクリーンのスペクトル発光特性を考慮に入れながら前記測定データセットからの被測定物（３８）の少なくとも１つの反射特性を決定するように構成されていることを特徴とするシステム（１）。
〔付記１９〕
付記１８に記載のシステム（１）であって、前記評価ユニット（１３，１４）は、前記被測定物の決定された少なくとも１つの反射特性を、少なくとも１つの予め定められた基準反射特性と比較するように構成されていることを特徴とするシステム（１）。
〔付記２０〕
付記２乃至５のうちいずれか一項及び付記９又は１０のうちいずれか一項と組み合わせた、付記１１乃至１９のうちいずれか一項に記載のシステム（１）であって、前記スクリーン（７）がＭ個のカラーチャネルを備え前記カメラ（６）がＮ個のカラーチャネルを備え、Ｍ＞１であってＮ＞１であり、各測定データセットが少なくともＭ×Ｎ測定値を備え（Ｆ（ｄ，ｃ）、１≦ｄ≦Ｍであり１≦ｃ≦Ｎ）、Ｍ×Ｎ測定値は、前記スクリーンのカラーチャネルと前記カメラ（６）のカラーチャネルのＭ×Ｎ個の異なる組み合わせに対応することを特徴とするシステム（１）。
〔付記２１〕
付記１乃至２０のいずれかに記載のシステム（１）であって、前記モバイル電子機器（２）はユーザインターフェース（１６）を備え、
－所定の照明イメージシーケンスをユーザインターフェース（１６）を介して設定でき及び／又は、
－前記ユーザインターフェース（１６）を介して異なる所定の照明イメージシーケンス間での選択が可能となり、及び／又は、
－前記ユーザインターフェース（１６）を介して、異なる被測定物間で、及び／又は関心対象の被測定物の異なる特性間での選択が可能となり、前記制御機器は、前記被測定物及び／又は関心対象の特性のなされた選択に則して、幾つかの記憶された所定の照明イメージシーケンス間で、所定の照明イメージシーケンスを選択するように構成されていることを特徴とするシステム（１）。
〔付記２２〕
付記１乃至２１のいずれか一項に記載のシステム（１）であって、前記モバイル機器（２）は較正モードに切替可能であることを特徴とし、前記モバイル機器（２）は前記較正モードにおいて、言及した前記較正規準の測定イメージをキャプチャし、前記較正規準と、前記較正規準に属する記憶された基準データセットの測定イメージを用いながら前記モバイル機器（２）の較正、特に、前記カメラ（６）及び／又は較正スクリーン（７）の較正を実行するように構成されているシステム（１）。
〔付記２３〕
前記スクリーン（７）はタッチスクリーンとして設計されていることを特徴とする付記１乃至２２のいずれか一項に記載のシステム（１）。
〔付記２４〕
前記モバイル電子機器はスマートフォン又はタブレットコンピュータである、付記１乃至２３のいずれか一項に記載のシステム（１）。
〔付記２５〕
付記１乃至２４のいずれか一項に記載のシステムによって被測定物の測定イメージをキャプチャする方法であって、
－制御ユニット（８）によって、所定の照明イメージシーケンスの幾つかの異なる照明イメージを順次表示するように前記モバイル電子機器（２）のスクリーン（７）を作動させるステップと、
－所定の照明イメージシーケンスの各照明イメージの表示と同時に被測定物の測定イメージをキャプチャするように前記モバイル電子機器のカメラ（６）を作動させるステップと、を含む方法。
〔付記２６〕
付記１乃至１８のいずれか一項に記載の前記システムのモバイル機器（２）の内部データメモリ（１１）に直接ロードされ得るコンピュータプログラム製品（１０）であって、ソフトウェアコードセクションを備え、前記コンピュータプログラム製品（１０）が前記モバイル電子機器（２）上で稼働するときに、前記ソフトウェアコードによって付記１９に記載の方法のステップが実行される、コンピュータプログラム製品（１０）。
Further, the calibration mode of the device 2 can be activated via the user interface 16 of the mobile device 2. The control unit 8 and the evaluation unit 13 of the mobile device 2 are configured to capture and evaluate the measurement image of the calibration criterion in the mentioned calibration mode. For this capture, the calibration criteria are kept by the user within the observation area 20 of the camera 6. As described, the value of the spectral channel Sk is calculated from the measurement image by the evaluation unit 13 and then compared to the reference data set that belongs to this calibration criterion and is stored in the data memory 9 of the mobile device 2. To. The values of the variables D d (λ) and C c (λ) are automatically recalculated based on this comparison and stored in the data memory 9 for further measurement.
[Appendix 1]
A system (1) provided with a mobile electronic device (2) for capturing a measurement image of a measured object, wherein the mobile electronic device (2) is a system (1).
-Housing (5) and
-A camera (6) integrated in the housing (5) for capturing a measurement image (39) of the object to be measured (38) in the observation area (20) of the camera (6). Camera (6) and
-A screen (7) integrated with the housing (5) for displaying a light emission of an image, and a screen (7) facing the observation area (20) of the camera (6).
-Integrated within the housing (5), the screen (7) of the mobile electronic device (2) is activated to sequentially display several different illumination images (23) of a predetermined illumination image sequence. The mobile electronic device (2) is a control unit (8) configured in the above-mentioned mobile electronic device (2) so as to capture a measurement image (39) of an object to be measured at the same time as displaying each illumination image (23) of a predetermined illumination image sequence. ), A system (1) comprising a control unit (8) configured to operate the camera (6).
[Appendix 2]
In the system (1) according to the appendix 1, the screen (7) of the mobile electronic device (2) includes several color channels, and the screen (7) emits a spectrum specific to each of the color channels. The screen (7) has a characteristic, and the screen (7) includes a plurality of optical elements arranged in a grid, and the spectral emission characteristics of each of the color channels correspond to the channel-specific spectral emission characteristics of each color channel. A system (1) characterized by being formed by a subset of the optical elements of the screen (7).
[Appendix 3]
The control unit (8) of the mobile electronic device (2) in the system (1) according to the appendix 2.
-By operating the optical element of only one color channel of the screen (7) and operating all the activated optical elements of this color channel with a predetermined uniform luminance value for this color channel. Or,
-By operating the optics of several color channels and operating all the activated optics with a predetermined uniform brightness value for each color channel, or
-By operating the optics of one or more color channels and operating all the activated optics with a predetermined gradient for each color channel.
A system (1) configured to actuate the screen (7) of the mobile electronic device (2) to display one or more of the illumination images (23) of a predetermined illumination image sequence. ..
[Appendix 4]
The system (1) according to any one of Supplementary note 2 or 3.
The screen (7) of the mobile electronic device (2) comprises a red color channel, a green color channel and a blue color channel, and the illumination sequence includes a red illumination image (23), a green illumination image (24) and a blue illumination image (25). ), And the control unit (8) of the mobile electronic device (2)
-By operating the optical elements of only the red color channel of the screen (7) and operating all the activated optical elements of the red color channel with a uniform brightness value predetermined for the red color channel. Display the red illumination image (23) and display
-By operating the optics of only the green color channel of the screen (7) and operating all the activated optics of the green color channel with a predetermined uniform brightness value for the green color channel. Display the green illumination image (24) and / or
-By operating the optical elements of the screen (7) only for the blue color channel and operating all the activated optical elements of the blue color channel with a uniform brightness value predetermined for the blue color channel. Display the blue illumination image (25),
A system (1), characterized in that the screen (7) is operated as described above.
[Appendix 5]
In the system (1) according to the appendices 1 to 4, the following image characteristics of each illumination image (23) in a predetermined illumination image sequence:
-The spectral composition of the light emitted by the screen (7) when displaying each illumination image and / or
-For each color channel of the screen (7), uniform luminance values and / or as long as this appendix is relevant back to any one of appendices 2-4.
-Screen area filled out by each illumination image (28, 29, 30) and / or
-Arrangement of screen areas filled out by the respective illumination images (28, 29, 30) within the entire image area (22) of the screen (7).
A system in which one or more of them are predetermined (1).
[Appendix 6]
In the system (1) according to any one of the appendices 1 to 5, each of the illumination images fills out only a partial region (33) of the entire image region of the screen (7), and the illumination image of the illumination image. A system (1) characterized in that the filled-out partial regions (33) are different from each other in their arrangement on the entire image region of the screen (7).
[Appendix 7]
In the system (1) according to Appendix 6, the entire image area of the screen (7) includes an upper edge (34), and the filled-out partial area (33) of the illumination image is the screen (7). ) Are different from each other in their distance from the upper edge (34) of the entire image region, and the lens is located above the upper edge (34) of the entire image region of the screen (7). A system characterized by (1).
[Appendix 8]
The system (1) according to the appendices 1 to 7, wherein the system (1) stores at least one data memory (9) in which lighting parameters that partially or completely define a predetermined lighting image sequence are stored. , 11), the control unit (8) of the mobile device (2) searches the data memory (9, 11) for lighting parameters stored in the at least one data memory (9, 11). A system (1) characterized in that it is configured to determine a predetermined lighting image sequence based on the searched lighting parameters.
[Appendix 9]
In the system (1) according to the appendices 1 to 8, the camera (6) of the mobile electronic device (2) has several different color channels, and the camera (6) is channel-specific with respect to each color channel. The camera (6) has an image sensor having a plurality of sensor elements arranged in a grid, and each color channel of the camera (6) has a spectral sensitivity of the camera (6). A system characterized in that it is formed by a subset of the sensor elements of an image sensor that correspond to the channel-specific sensitivities of each of the color channels of (1).
[Appendix 10]
The system (1) according to Appendix 9, wherein the camera (6) of the mobile electronic device (2) includes a red color channel, a green color channel, and a blue color channel.
[Appendix 11]
The system (1) according to any one of Supplementary note 1 to 10, wherein each of the measurement images (39) includes a plurality of image points (40) and image data assigned to the image points (40). , The system (1) merges the image points (40) of the measurement image (39) and the image data of the merged image points into the measurement data set of each merged image point (40). A system (1) comprising an evaluation unit (13, 14) configured to be grouped.
[Appendix 12]
In the system (1) according to the appendix 11, the evaluation unit (13, 14) merges the image point (40) of the measurement image (39) by the image registration of the measurement image (39). A system characterized by being configured in (1).
[Appendix 13]
The system (1) according to any one of Supplementary note 11 and 12, wherein the evaluation unit (13, 14) evaluates the measurement data set by an algorithm calibrated or trained by machine learning. The configured system (1).
[Appendix 14]
The system (1) according to Appendix 13, wherein the algorithm is trained by a monitored learning method or by an unmonitored learning method (1).
[Appendix 15]
The system (1) according to any one of Supplementary note 11 to 14, wherein the evaluation unit (13, 14) is configured to evaluate the measurement data set by a classification method. System (1).
[Appendix 16]
The system (1) according to any one of Supplementary note 11 to 15, wherein the evaluation unit (13, 14) is configured to evaluate the measurement data set by an artificial neural network (1). ).
[Appendix 17]
The system (1) according to any one of Supplementary note 11 to 16, wherein the evaluation unit (13, 14) compares each measurement data set with at least one predetermined reference data set. The configured system (1).
[Appendix 18]
In the system (1) according to any one of the appendices 11 to 17, the evaluation unit (13, 14) takes into consideration the spectral sensitivity of the camera (6) and the spectral emission characteristics of the screen. A system (1) characterized in that it is configured to determine at least one reflection characteristic of the object to be measured (38) from the measurement data set.
[Appendix 19]
In the system (1) according to Appendix 18, the evaluation unit (13, 14) compares at least one determined reflection characteristic of the measured object with at least one predetermined reference reflection characteristic. A system (1) characterized in that it is configured to do so.
[Appendix 20]
The system (1) according to any one of the appendices 11 to 19, which is combined with any one of the appendices 2 to 5 and any one of the appendices 9 or 10, according to the screen (7). ) Have M color channels, the camera (6) has N color channels, M> 1 and N> 1, and each measurement data set has at least M × N measurements (F). (D, c), 1 ≦ d ≦ M and 1 ≦ c ≦ N), and the M × N measured value is a different combination of M × N of the color channel of the screen and the color channel of the camera (6). A system characterized by corresponding (1).
[Appendix 21]
The system (1) according to any one of the appendices 1 to 20, wherein the mobile electronic device (2) includes a user interface (16).
-A predetermined illumination image sequence can be set via the user interface (16) and / or
-Selection between different predetermined illumination image sequences is possible and / or between different predetermined illumination image sequences via the user interface (16).
-Through the user interface (16), it is possible to select between different objects to be measured and / or between different characteristics of the object to be measured, and the control device is the object to be measured and / or the object to be measured. A system characterized in that it is configured to select a predetermined illumination image sequence among several stored predetermined illumination image sequences according to the selection made of the characteristic of interest (1). ..
[Appendix 22]
The system (1) according to any one of Supplementary note 1 to 21, wherein the mobile device (2) can be switched to a calibration mode, and the mobile device (2) is in the calibration mode. , The calibration of the mobile device (2), in particular the camera (6), capturing the measurement image of the mentioned calibration criterion and using the calibration criterion and the measurement image of the stored reference dataset belonging to the calibration criterion. ) And / or a system (1) configured to perform calibration of the calibration screen (7).
[Appendix 23]
The system (1) according to any one of Supplementary note 1 to 22, wherein the screen (7) is designed as a touch screen.
[Appendix 24]
The system (1) according to any one of Supplementary note 1 to 23, wherein the mobile electronic device is a smartphone or a tablet computer.
[Appendix 25]
A method of capturing a measurement image of an object to be measured by the system according to any one of Supplementary note 1 to 24.
-A step of activating the screen (7) of the mobile electronic device (2) by the control unit (8) to sequentially display several different lighting images of a predetermined lighting image sequence.
-A method comprising the step of activating the camera (6) of the mobile electronic device to capture the measured image of the object to be measured at the same time as displaying each lighting image in a predetermined lighting image sequence.
[Appendix 26]
A computer program product (10) that can be loaded directly into the internal data memory (11) of the mobile device (2) of the system according to any one of Supplementary Notes 1 to 18 and that comprises a software code section. A computer program product (10), wherein the software code performs the steps of the method described in Appendix 19 when the program product (10) runs on the mobile electronic device (2).
Claims (24)
－ハウジング（５）と、
－前記ハウジング（５）内に一体化されたカメラ（６）であって、前記カメラ（６）の観測領域（２０）内で被測定物（３８）の測定イメージ（３９）をキャプチャする為のカメラ（６）と、
－イメージの発光表示の為の、前記ハウジング（５）に一体化されたスクリーン（７）であって、前記カメラ（６）の観測領域（２０）に面しているスクリーン（７）と、
－前記ハウジング（５）内に一体化され、前記モバイル電子機器（２）のスクリーン（７）を、所定の照明イメージシーケンスの幾つかの異なる照明イメージ（２３）を順次表示するように作動させるように構成された制御ユニット（８）であって、所定の照明イメージシーケンスの各照明イメージ（２３）の表示と同時に、被測定物の測定イメージ（３９）をキャプチャさせるように前記モバイル電子機器（２）の前記カメラ（６）を作動させるように構成された制御ユニット（８）と、を備え、
前記測定イメージ（３９）それぞれは複数の像点（４０）並びに前記像点（４０）に割り当てられたイメージデータを備え、前記システム（１）が、イメージレジストレーションによって前記測定イメージ（３９）の像点（４０）をマージし、前記マージされた像点（４３）の前記イメージデータを測定データセットにグループ化するように構成された評価ユニット（１３，１４）を備えており、前記マージされた像点（４０）はレジスタされた測定イメージ（４１）を形成し、その前記像点（４３）は前記それぞれ割り当てられた測定データセットを備え、前記評価ユニット（１３，１５）は、物体認識アルゴリズムによって、前記レジスタされたイメージ（４１）の物体像点（４２）のうち、前記被測定物（３８）の物点（４３）をイメージングするものをそれぞれ認識するように構成され、前記評価ユニット（１３，１５）は、仮定される物体像点として定義される第１の像点を起点として、隣接する像点の前記測定データセットが前記第１の像点の前記測定データセットとどの程度異なるかを判断し、それらの隣接する像点のみを、前記測定データセットが前記第１の像点の前記測定データセットからの偏差が十分に小さい物体像点としても分類し、且つ、それぞれ認識された物点から、更なる像点が物体像点として分類され得なくなるまで、前記物体認識アルゴリズムを繰り返すように構成されている、システム（１）。 A system (1) provided with a mobile electronic device (2) for capturing a measurement image of a measured object, wherein the mobile electronic device (2) is a system (1).
-Housing (5) and
-A camera (6) integrated in the housing (5) for capturing a measurement image (39) of the object to be measured (38) in the observation area (20) of the camera (6). Camera (6) and
-A screen (7) integrated with the housing (5) for displaying a light emission of an image, and a screen (7) facing the observation area (20) of the camera (6).
-Integrated within the housing (5), the screen (7) of the mobile electronic device (2) is activated to sequentially display several different illumination images (23) of a predetermined illumination image sequence. The mobile electronic device (2) is a control unit (8) configured in the mobile electronic device (2) so as to capture a measurement image (39) of an object to be measured at the same time as displaying each illumination image (23) of a predetermined illumination image sequence. ), A control unit (8) configured to operate the camera (6), and the like .
Each of the measurement images (39) includes a plurality of image points (40) and image data assigned to the image points (40), and the system (1) is an image of the measurement image (39) by image registration. It comprises an evaluation unit (13,14) configured to merge points (40) and group the image data of the merged image points (43) into a measurement data set, said merged. The image points (40) form a registered measurement image (41), the image points (43) include the respective assigned measurement data sets, and the evaluation unit (13, 15) is an object recognition algorithm. Among the object image points (42) of the registered image (41), the evaluation unit ( In 13 and 15), how different the measurement data set of the adjacent image points is from the measurement data set of the first image point, starting from the first image point defined as the assumed object image point. However, only those adjacent image points are classified as object image points by which the measurement data set has a sufficiently small deviation from the measurement data set of the first image point, and each of them is recognized. A system (1) configured to repeat the object recognition algorithm from a point of interest until further image points cannot be classified as object image points .
－前記スクリーン（７）の単一のカラーチャネルのみの光学素子を作動させ、このカラーチャネルの全ての作動された光学素子を、このカラーチャネルに関して予め定められた均一な輝度値で作動させることによって、又は、
－幾つかのカラーチャネルの光学素子を作動させ、全ての作動された光学素子を、それぞれのカラーチャネルに関して予め定められた均一な輝度値で作動させることによって、又は、
－１つ以上のカラーチャネルの光学素子を作動させ、全ての作動された光学素子を、それぞれのカラーチャネルに関して予め定められた勾配をもって作動させることによって、
所定の照明イメージシーケンスの照明イメージ（２３）の１つ以上を表示するように前記モバイル電子機器（２）のスクリーン（７）を作動させるように構成されていることを特徴とするシステム（１）。 The control unit (8) of the mobile electronic device (2) in the system (1) according to claim 2.
-By operating the optical element of only one color channel of the screen (7) and operating all the activated optical elements of this color channel with a predetermined uniform luminance value for this color channel. Or,
-By operating the optics of several color channels and operating all the activated optics with a predetermined uniform brightness value for each color channel, or
-By operating the optics of one or more color channels and operating all the activated optics with a predetermined gradient for each color channel.
A system (1) configured to actuate the screen (7) of the mobile electronic device (2) to display one or more of the illumination images (23) of a predetermined illumination image sequence. ..
前記モバイル電子機器（２）のスクリーン（７）が赤色カラーチャネル、緑色カラーチャネル及び青色カラーチャネルを備え、前記照明シーケンスが赤色照明イメージ（２３）、緑色照明イメージ（２４）及び青色照明イメージ（２５）を備え、前記モバイル電子機器（２）の制御ユニット（８）が、
－前記スクリーン（７）の赤色カラーチャネルのみの光学素子を作動させ、前記赤色カラーチャネルの全ての作動された光学素子を、前記赤色カラーチャネルに関して予め定められた均一な輝度値で作動させることによって赤色照明イメージ（２３）を表示し、
－前記スクリーン（７）の緑色カラーチャネルのみの光学素子を作動させ、前記緑色カラーチャネルの全ての作動された光学素子を、前記緑色カラーチャネルに関して予め定められた均一な輝度値で作動させることによって緑色照明イメージ（２４）を表示し、及び／又は、
－前記スクリーン（７）の青色カラーチャネルのみの光学素子を作動させ、前記青色カラーチャネルの全ての作動された光学素子を、前記青色カラーチャネルに関して予め定められた均一な輝度値で作動させることによって青色照明イメージ（２５）を表示する、
ように前記スクリーン（７）を作動させることを特徴とするシステム（１）。 The system (1) according to any one of claims 2 or 3.
The screen (7) of the mobile electronic device (2) comprises a red color channel, a green color channel and a blue color channel, and the illumination sequence includes a red illumination image (23), a green illumination image (24) and a blue illumination image (25). ), And the control unit (8) of the mobile electronic device (2)
-By operating the optical elements of only the red color channel of the screen (7) and operating all the activated optical elements of the red color channel with a uniform brightness value predetermined for the red color channel. Display the red illumination image (23) and display
-By operating the optics of only the green color channel of the screen (7) and operating all the activated optics of the green color channel with a predetermined uniform brightness value for the green color channel. Display the green illumination image (24) and / or
-By operating the optical elements of the screen (7) only for the blue color channel and operating all the activated optical elements of the blue color channel with a uniform brightness value predetermined for the blue color channel. Display the blue illumination image (25),
A system (1), characterized in that the screen (7) is operated as described above.
－それぞれの照明イメージを表示したときに前記スクリーン（７）によって発光される光のスペクトル組成、及び／又は、
－前記スクリーン（７）の各カラーチャネルに関して、均一な輝度値、及び／又は、
－それぞれの照明イメージ（２８，２９，３０）によって埋め尽くされるスクリーン領域、及び／又は、
－前記スクリーン（７）の全イメージ領域（２２）内でそれぞれの照明イメージ（２８，２９，３０）によって埋め尽くされるスクリーン領域の配置、
のうち１つ以上が予め定められているシステム（１）。 The system (1) according to any one of claims 1 to 4, wherein the following image characteristics of each illumination image (23) of a predetermined illumination image sequence are:
-The spectral composition of the light emitted by the screen (7) when displaying each illumination image and / or
-For each color channel of the screen (7), a uniform brightness value and / or
-Screen area filled with each illumination image (28, 29, 30) and / or
-Arrangement of the screen area filled with the respective illumination images (28, 29, 30) in the entire image area (22) of the screen (7).
A system in which one or more of them are predetermined (1).
－所定の照明イメージシーケンスをユーザインターフェース（１６）を介して設定でき及び／又は、
－前記ユーザインターフェース（１６）を介して異なる所定の照明イメージシーケンス間での選択が可能となり、及び／又は、
－前記ユーザインターフェース（１６）を介して、異なる被測定物間で、及び／又は関心対象の被測定物の異なる特性間での選択が可能となり、前記制御機器は、前記被測定物及び／又は関心対象の特性のなされた選択に則して、幾つかの記憶された所定の照明イメージシーケンス間で、所定の照明イメージシーケンスを選択するように構成されていることを特徴とするシステム（１）。 The system (1) according to any one of claims 1 to 18 , wherein the mobile electronic device (2) includes a user interface (16).
-A predetermined illumination image sequence can be set via the user interface (16) and / or
-Selection between different predetermined illumination image sequences is possible and / or between different predetermined illumination image sequences via the user interface (16).
-Through the user interface (16), it is possible to select between different objects to be measured and / or between different characteristics of the object to be measured, and the control device is the object to be measured and / or the object to be measured. A system characterized in that it is configured to select a predetermined illumination image sequence among several stored predetermined illumination image sequences according to the selection made of the characteristic of interest (1). ..
－制御ユニット（８）によって、所定の照明イメージシーケンスの幾つかの異なる照明イメージを順次表示するように前記モバイル電子機器（２）のスクリーン（７）を作動させるステップと、-A step of activating the screen (7) of the mobile electronic device (2) by the control unit (8) to sequentially display several different lighting images of a predetermined lighting image sequence.
－所定の照明イメージシーケンスの各照明イメージの表示と同時に被測定物の測定イメージをキャプチャするように前記モバイル電子機器のカメラ（６）を作動させるステップと、-A step of activating the camera (6) of the mobile electronic device to capture the measured image of the object to be measured at the same time as displaying each lighting image in a predetermined lighting image sequence.
前記測定イメージ（３９）の像点（４０）をマージし、当該マージされた像点（４０）に割り当てられたイメージデータを測定データセットにグループ化するステップであって、前記マージされた像点（４０）がレジスタされた測定イメージ（４１）を形成し、その前記像点（４３）が前記それぞれ割り当てられた測定データセットを備える、ステップと、The step of merging the image points (40) of the measurement image (39) and grouping the image data assigned to the merged image points (40) into the measurement data set, which is the step of grouping the merged image points. A step, wherein (40) forms a registered measurement image (41), wherein the image point (43) comprises the respective assigned measurement data set.
前記レジスタされたイメージ（４１）の物体像点（４２）のうち、前記被測定物（３８）の物点（４３）をイメージングするものをそれぞれ認識するように、物体認識アルゴリズムを実行するステップであって、当該物体認識アルゴリズムを実行するステップは、仮定される物体像点として定義される第１の像点を起点として、隣接する像点の前記測定データセットが前記第１の像点の前記測定データセットとどの程度異なるかを判断すること、それらの隣接する像点のみを、前記測定データセットが前記第１の像点の前記測定データセットからの偏差が十分に小さい物体像点としても分類すること、及び、それぞれ認識された物点から、更なる像点が物体像点として分類され得なくなるまで、前記物体認識アルゴリズムを繰り返すことを含む、ステップと、を含む方法。In the step of executing the object recognition algorithm so as to recognize each of the object image points (42) of the registered image (41) that images the object point (43) of the object to be measured (38). Therefore, in the step of executing the object recognition algorithm, the measurement data set of the adjacent image points starts from the first image point defined as the assumed object image point, and the measurement data set of the adjacent image points is the said of the first image point. Determining how different the measurement data set is, even if only those adjacent image points are object image points where the deviation of the first image point from the measurement data set is sufficiently small. A method comprising classifying and repeating the object recognition algorithm from each recognized object point until no further image point can be classified as an object image point.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102016226206.8A DE102016226206A1 (en) | 2016-12-23 | 2016-12-23 | System and method for acquiring measurement images of a measurement object |
| DE102016226206.8 | 2016-12-23 | ||
| PCT/EP2017/084212 WO2018115346A1 (en) | 2016-12-23 | 2017-12-21 | System and method for capturing measurement images of an object to be measured |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020507103A JP2020507103A (en) | 2020-03-05 |
| JPWO2018115346A5 true JPWO2018115346A5 (en) | 2022-01-12 |
Family
ID=60915526
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019534173A Pending JP2020507103A (en) | 2016-12-23 | 2017-12-21 | System and method for capturing a measured image of a device under test |
Country Status (10)
| Country | Link |
|---|---|
| US (2) | US10951831B2 (en) |
| EP (1) | EP3560185B1 (en) |
| JP (1) | JP2020507103A (en) |
| KR (1) | KR102454562B1 (en) |
| CN (1) | CN110383805B (en) |
| AU (1) | AU2017383047B2 (en) |
| CA (1) | CA3048123A1 (en) |
| DE (1) | DE102016226206A1 (en) |
| RU (1) | RU2758914C2 (en) |
| WO (1) | WO2018115346A1 (en) |
Families Citing this family (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150163410A1 (en) * | 2013-12-10 | 2015-06-11 | Semiconductor Energy Laboratory Co., Ltd. | Display Device and Electronic Device |
| DE102016226206A1 (en) | 2016-12-23 | 2018-06-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | System and method for acquiring measurement images of a measurement object |
| US11263428B2 (en) | 2017-07-09 | 2022-03-01 | Ringo Ai, Inc. | Electromagnetic emitters and detectors for electronic devices |
| US10303920B2 (en) | 2017-07-09 | 2019-05-28 | Lumenetix, Inc. | Techniques for creating characterization matrices for reflectance, illuminance, or sensor response |
| US11436858B2 (en) | 2017-07-09 | 2022-09-06 | Ringo Ai, Inc. | Characterizing reflectance, illuminance, and sensor response for electromagnetic radiation |
| DE102018114005A1 (en) | 2018-06-12 | 2019-12-12 | Carl Zeiss Jena Gmbh | Material testing of optical specimens |
| US10872426B2 (en) * | 2018-06-20 | 2020-12-22 | Centric Software, Inc. | Guide-assisted capture of material data |
| CN109269643B (en) * | 2018-11-02 | 2021-05-11 | 天津津航技术物理研究所 | Spectrum demodulation system and method based on mobile device screen light source |
| CN114402588A (en) | 2019-03-13 | 2022-04-26 | 林戈阿尔公司 | White balance with reference illuminant |
| GB2583905A (en) * | 2019-04-24 | 2020-11-18 | Univ Ulster | Method and system for generating optical spectra |
| US11758256B2 (en) | 2019-06-20 | 2023-09-12 | Cilag Gmbh International | Fluorescence imaging in a light deficient environment |
| US11533417B2 (en) | 2019-06-20 | 2022-12-20 | Cilag Gmbh International | Laser scanning and tool tracking imaging in a light deficient environment |
| US11937784B2 (en) | 2019-06-20 | 2024-03-26 | Cilag Gmbh International | Fluorescence imaging in a light deficient environment |
| US11348334B1 (en) * | 2019-06-30 | 2022-05-31 | George Douglas MacEwen | Methods and systems for skin color matching using an imaging device and a controlled light source |
| DE102019210405A1 (en) | 2019-07-15 | 2021-01-21 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Method for the investigation of substances, computer program product for use in this method, and mobile electronic device |
| BR112022009271A2 (en) | 2019-11-26 | 2022-08-02 | Hoffmann La Roche | METHOD FOR PERFORMING AN ANALYTICAL MEASUREMENT, COMPUTER PROGRAM, COMPUTER-LEABLE STORAGE MEDIA, MOBILE DEVICE AND KIT |
| US11887088B2 (en) * | 2020-01-22 | 2024-01-30 | Salesforce, Inc. | Smart moderation and/or validation of product and/or service details in database systems |
| AU2021404426A1 (en) * | 2020-12-18 | 2023-08-03 | Terramera, Inc. | Systems and methods for hyperspectral imaging of plants |
| CN112837299B (en) * | 2021-02-09 | 2024-02-27 | 浙江工业大学 | Textile image fingerprint retrieval method |
| DE102021117494A1 (en) | 2021-07-07 | 2023-01-12 | Schneider Electric Industries Sas | Display device, method and mobile end device for the optical output of an internal operating state of an electrical device |
Family Cites Families (27)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1472913B1 (en) * | 2002-02-07 | 2012-04-11 | RGB Technologies AB | Analysis method |
| JP2011106931A (en) * | 2009-11-16 | 2011-06-02 | Roland Dg Corp | Three-dimensional shape measuring system and mobile phone |
| US10230880B2 (en) * | 2011-11-14 | 2019-03-12 | Tseng-Lu Chien | LED light has built-in camera-assembly for colorful digital-data under dark environment |
| CN104011769A (en) * | 2011-12-21 | 2014-08-27 | Sca卫生用品公司 | Method For Measuring The Absorption Of Fluid In An Absorbent Product |
| FR2987118A1 (en) * | 2012-02-17 | 2013-08-23 | Franck Hennebelle | METHOD AND DEVICE FOR MEASURING THE COLOR OF AN OBJECT |
| US20140028799A1 (en) * | 2012-07-25 | 2014-01-30 | James Kuffner | Use of Color and Intensity Modulation of a Display for Three-Dimensional Object Information |
| US20150363481A1 (en) * | 2012-09-06 | 2015-12-17 | Michael N. Haynes | Systems, Devices, and/or Methods for Managing Information |
| EP2946198B1 (en) * | 2013-01-21 | 2019-10-30 | Cornell University | Smartphone-based apparatus and method for obtaining repeatable, quantitative colorimetric measurement |
| US20140378810A1 (en) * | 2013-04-18 | 2014-12-25 | Digimarc Corporation | Physiologic data acquisition and analysis |
| JP6506507B2 (en) * | 2013-05-15 | 2019-04-24 | キヤノン株式会社 | Measurement apparatus and control method thereof |
| US9525811B2 (en) * | 2013-07-01 | 2016-12-20 | Qualcomm Incorporated | Display device configured as an illumination source |
| EP2821762A1 (en) * | 2013-07-03 | 2015-01-07 | Akzo Nobel Coatings International B.V. | Process of measuring color properties of an object using a mobile device |
| JP2015127680A (en) * | 2013-12-27 | 2015-07-09 | スリーエム イノベイティブ プロパティズ カンパニー | Measuring device, system and program |
| US10478127B2 (en) * | 2014-06-23 | 2019-11-19 | Sherlock Solutions, LLC | Apparatuses, methods, processes, and systems related to significant detrimental changes in health parameters and activating lifesaving measures |
| US9897434B2 (en) * | 2014-10-21 | 2018-02-20 | Hand Held Products, Inc. | Handheld dimensioning system with measurement-conformance feedback |
| RU2601678C2 (en) * | 2014-12-15 | 2016-11-10 | Самсунг Электроникс Ко., Лтд. | Portable device for measurement of chromophores in skin and method of using said device |
| US9230140B1 (en) * | 2014-12-30 | 2016-01-05 | Hand Held Products, Inc. | System and method for detecting barcode printing errors |
| US10475361B2 (en) * | 2015-02-02 | 2019-11-12 | Apple Inc. | Adjustable display illumination |
| US9521331B2 (en) * | 2015-04-21 | 2016-12-13 | Hand Held Products, Inc. | Capturing a graphic information presentation |
| US9786101B2 (en) * | 2015-05-19 | 2017-10-10 | Hand Held Products, Inc. | Evaluating image values |
| US9507974B1 (en) * | 2015-06-10 | 2016-11-29 | Hand Held Products, Inc. | Indicia-reading systems having an interface with a user's nervous system |
| US20160377414A1 (en) * | 2015-06-23 | 2016-12-29 | Hand Held Products, Inc. | Optical pattern projector |
| US9835486B2 (en) * | 2015-07-07 | 2017-12-05 | Hand Held Products, Inc. | Mobile dimensioner apparatus for use in commerce |
| EP3396313B1 (en) * | 2015-07-15 | 2020-10-21 | Hand Held Products, Inc. | Mobile dimensioning method and device with dynamic accuracy compatible with nist standard |
| JP6829529B2 (en) * | 2015-09-30 | 2021-02-10 | カラー・グレイル・リサーチＣｏｌｏｒ Ｇｒａｉｌ Ｒｅｓｅａｒｃｈ | Methods and related devices for determining the reflectance of an object |
| EP3184977A1 (en) * | 2015-12-23 | 2017-06-28 | IMEC vzw | User device |
| DE102016226206A1 (en) | 2016-12-23 | 2018-06-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | System and method for acquiring measurement images of a measurement object |
-
2016
- 2016-12-23 DE DE102016226206.8A patent/DE102016226206A1/en not_active Withdrawn
-
2017
- 2017-12-21 EP EP17823141.1A patent/EP3560185B1/en active Active
- 2017-12-21 RU RU2019121249A patent/RU2758914C2/en active
- 2017-12-21 WO PCT/EP2017/084212 patent/WO2018115346A1/en unknown
- 2017-12-21 US US16/472,023 patent/US10951831B2/en active Active
- 2017-12-21 CA CA3048123A patent/CA3048123A1/en active Pending
- 2017-12-21 KR KR1020197021539A patent/KR102454562B1/en active IP Right Grant
- 2017-12-21 CN CN201780087346.1A patent/CN110383805B/en active Active
- 2017-12-21 AU AU2017383047A patent/AU2017383047B2/en active Active
- 2017-12-21 JP JP2019534173A patent/JP2020507103A/en active Pending
-
2021
- 2021-02-05 US US17/248,759 patent/US11588979B2/en active Active
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JPWO2018115346A5 (en) | ||
| JP4857287B2 (en) | Method, system, and recording medium for recording computer program for identifying illumination light in image | |
| US7936377B2 (en) | Method and system for optimizing an image for improved analysis of material and illumination image features | |
| RU2019121249A (en) | System and method for capturing measurement images of a measured object | |
| US20200043157A1 (en) | Inspection Apparatus, Inspection Method, And Program | |
| JP4997252B2 (en) | How to identify the illumination area in an image | |
| US7894662B2 (en) | Method for using image depth information in identifying illumination fields | |
| RU2734870C2 (en) | Information retrieval system and information search program | |
| JP6919982B2 (en) | Image inspection equipment | |
| CN106716876B (en) | High dynamic range encodes light detection | |
| US11410412B2 (en) | Anti-counterfeiting method and system for under-screen fingerprint identification | |
| US9606056B2 (en) | Selection of spectral bands or filters for material classification under multiplexed illumination | |
| JP6917761B2 (en) | Image inspection equipment | |
| US20150012226A1 (en) | Material classification using brdf slices | |
| KR20140023877A (en) | System and method for identifying complex tokens in an image | |
| EP3509284A1 (en) | Electronic apparatus and control method thereof | |
| CN108184286A (en) | The control method and control system and electronic equipment of lamps and lanterns | |
| RU2724786C1 (en) | Information search system, information search method and information search program | |
| CN108235831A (en) | The control method and control system and electronic equipment of lamps and lanterns | |
| CN105954205A (en) | Spectral imaging-based green plum sugar content and acidity fast non-destructive detection device | |
| JP6931552B2 (en) | Image inspection equipment | |
| CN116148265A (en) | Flaw analysis method and system based on synthetic leather high-quality image acquisition | |
| CN114972547A (en) | Method for determining tooth color | |
| JP2779784B2 (en) | Brightness index measurement method for glass products, etc. | |
| JP7445937B1 (en) | Plastic material discrimination method, discrimination device, and discrimination program |