WO2021149218A1 - 物体認識装置 - Google Patents

物体認識装置 Download PDF

Info

Publication number
WO2021149218A1
WO2021149218A1 PCT/JP2020/002307 JP2020002307W WO2021149218A1 WO 2021149218 A1 WO2021149218 A1 WO 2021149218A1 JP 2020002307 W JP2020002307 W JP 2020002307W WO 2021149218 A1 WO2021149218 A1 WO 2021149218A1
Authority
WO
WIPO (PCT)
Prior art keywords
optical sensor
space
holding body
attached
object recognition
Prior art date
Application number
PCT/JP2020/002307
Other languages
English (en)
French (fr)
Inventor
壮馬 白石
菊池 克
貴美 佐藤
悠 鍋藤
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to JP2021572216A priority Critical patent/JPWO2021149218A1/ja
Priority to US17/792,015 priority patent/US11941858B2/en
Priority to PCT/JP2020/002307 priority patent/WO2021149218A1/ja
Publication of WO2021149218A1 publication Critical patent/WO2021149218A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147Details of sensors, e.g. sensor lenses
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01VGEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
    • G01V8/00Prospecting or detecting by optical means
    • G01V8/10Detecting, e.g. by using light barriers
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01VGEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
    • G01V8/00Prospecting or detecting by optical means
    • G01V8/10Detecting, e.g. by using light barriers
    • G01V8/20Detecting, e.g. by using light barriers using multiple transmitters or receivers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/145Illumination specially adapted for pattern recognition, e.g. using gratings

Definitions

  • the present invention relates to an object recognition device.
  • Patent Document 1 describes an object recognition device mounted on an automobile.
  • This object recognition device includes a light emitting unit and a light receiving unit.
  • the infrared light emitted from the light projecting unit is reflected by an object existing outside the object recognition device and received by the light receiving unit.
  • Patent Document 2 describes a photoacoustic imaging device.
  • This photoacoustic imaging device includes a plurality of long light source bodies.
  • the object recognition device is used in various cases.
  • various objects such as a person who is near a storage unit such as a shelf in which goods such as goods are stored in a store such as a retail store, and goods such as goods stored in such a storage unit have been used.
  • An object recognition device may be used for recognition.
  • an object recognition device including such a case, an object (for example, an article such as a product or a person) existing in a specific area or passing through the specific area is highly sensitive by the object recognition device. It is required to recognize.
  • An example of an object of the present invention is to recognize an object existing in a specific region or passing through a specific region with high sensitivity. Other objects of the invention will become apparent from the description herein.
  • a retainer that extends in one direction and At least a part of a space attached to the holding body along the one direction and located on the side of the holding body with respect to the one direction of the holding body, in front of the space, and behind the space.
  • a light source that irradiates light toward
  • An optical sensor that is attached to the retainer and has at least a portion of the field of view directed within at least a portion of the space, the front of the space, and the rear of the space. It is an object recognition device provided with.
  • FIG. 2 is a diagram for explaining a first example of an optical sensor in which the field of view is directed from the lower side to the upper side in the vertical direction.
  • FIG. 2 is a diagram for explaining a second example of an optical sensor in which the field of view is directed from the lower side to the upper side in the vertical direction. It is a figure which shows the 1st modification of FIG. It is a figure which shows the 2nd modification of FIG. It is a figure which shows the 3rd modification of FIG. It is a figure which shows the 4th modification of FIG. It is a figure which shows the 5th modification of FIG.
  • FIG. 3 It is a figure which shows the 6th modification of FIG. It is a figure which shows the 7th modification of FIG. It is a figure which shows the 8th modification of FIG. It is a figure which shows the 9th modification of FIG. It is a figure which shows the tenth modification of FIG. It is a figure which shows the eleventh modification of FIG. It is a figure which shows the twelfth modification of FIG. It is a perspective view of the accommodating device which concerns on Embodiment 3. It is a figure for demonstrating the 1st example of the relationship between the light source and an optical sensor shown in FIG. It is a figure for demonstrating the 2nd example of the relationship between the light source and the optical sensor shown in FIG. It is a figure for demonstrating the 3rd example of the relationship between the light source and the optical sensor shown in FIG.
  • FIG. 1 is a perspective view of the object recognition device 10 according to the first embodiment.
  • the first direction X is the width direction (horizontal direction) of the space S located on the side of the holding body 100 described later.
  • the positive direction of the first direction X (the direction indicated by the arrow indicating the first direction X) is the direction from the space S toward the holding body 100.
  • the negative direction of the first direction X (the direction opposite to the direction indicated by the arrow indicating the first direction X) is the direction from the holder 100 toward the space S.
  • the second direction Y intersects the first direction X and is specifically orthogonal to each other.
  • the second direction Y is the height direction (vertical direction) of the space S located on the side of the holding body 100.
  • the positive direction of the second direction Y (the direction indicated by the arrow indicating the second direction Y) is the upward direction of the space S.
  • the negative direction of the second direction Y (the direction opposite to the direction indicated by the arrow indicating the second direction Y) is the downward direction of the space S.
  • the third direction Z intersects both the first direction X and the second direction Y, and is specifically orthogonal to each other.
  • the third direction Z is the front-back direction (horizontal direction) of the space S located on the side of the holding body 100.
  • the positive direction of the third direction Z (the direction indicated by the arrow indicating the third direction Z) is the direction from the front to the rear of the space S.
  • the negative direction of the third direction Z (the direction opposite to the direction indicated by the arrow indicating the third direction Z) is the direction from the rear to the front of the space S.
  • the first direction X, the second direction Y, and the third direction Z are not limited to the above-mentioned directions.
  • the first direction X, the second direction Y, and the third direction Z described above are the directions in an example of the use of the object recognition device 10 in the present embodiment.
  • the object recognition device 10 may be used so that the second direction Y is inclined obliquely from the vertical direction to the horizontal direction.
  • the object recognition device 10 is used so that the front-rear direction (third direction Z) of the space S is parallel to the vertical direction (both the first direction X and the second direction Y are parallel to the horizontal direction). You may.
  • the object recognition device 10 may be used so that the first direction X is parallel to the vertical direction and the second direction Y is parallel to the horizontal direction.
  • the object recognition device 10 includes a holder 100, a light source 200, and an optical sensor 300.
  • the holding body 100 is stretched in one direction (stretching direction of the holding body 100: second direction Y).
  • the light source 200 is attached to the holding body 100 along the one direction (second direction Y) of the holding body 100. Further, the light source 200 has a space S located on the side of the holding body 100 (negative direction of the first direction X) with respect to the one direction (second direction Y) of the holding body 100, and a space S in front of the space S (third direction).
  • the optical sensor 300 is attached to the holder 100. Further, at least a part of the field of view of the optical sensor 300 is at least a part of the space S, the front of the space S (the negative direction of the third direction Z), and the rear of the space S (the positive direction of the third direction Z). It is aimed.
  • the space S located on the side of the holding body 100 (negative direction of the first direction X), the front of the space S (negative direction of the third direction Z), or the rear of the space S (third direction).
  • An object located in the positive direction of Z) can be illuminated by the light of the light source 200. Further, the object irradiated by the light of the light source 200 can be detected by the optical sensor 300.
  • space S the front side of the space S (negative direction of the third direction Z) or the rear side of the space S (positive direction of the third direction Z)
  • space S An object passing ahead of the space S (negative direction of the third direction Z) or behind the space S (positive direction of the third direction Z) can be recognized with high sensitivity.
  • the holder 100 holds the light source 200 and the optical sensor 300.
  • the holding body 100 is a stretched body that extends in one direction (second direction Y).
  • the holding body 100 may be expandable and contractible in the above-mentioned one direction (second direction Y).
  • the length of the holding body 100 can be adjusted to a length suitable for the member to which the holding body 100 is attached.
  • the holding body 100 may have a tubular member and a stretched member movably inserted into the tubular member.
  • the length of the holding body 100 in the one direction (second direction Y) can be adjusted by moving the stretching member with respect to the tubular member.
  • the structure for adjusting the length of the holder 100 in the one direction (second direction Y) is not limited to this example. Further, the holding body 100 does not have to be expandable and contractible in the above one direction (second direction Y).
  • the light source 200 is located on the side of the holding body 100 facing the space S (the surface on the negative direction side of the first direction X).
  • the light emitted by the light source 200 is, for example, visible light, infrared rays or ultraviolet rays.
  • the light source 200 is attached to the holding body 100 along one direction (second direction Y)" means that, for example, the light source 200 is continuous along the one direction (second direction Y) of the holding body 100. It means that it is a linear light source (for example, a rod-shaped fluorescent lamp) that extends in a linear manner.
  • the light source 200 is attached to the holder 100 along one direction (second direction Y)
  • first direction Y means, for example, a plurality of light sources 200 (for example, a plurality of point-shaped light sources 200 or a plurality of line segments). It means that the light sources 200) are arranged apart from each other along the one direction (second direction Y) of the holding body 100.
  • the light source 200 is substantially entirely (for example, the holding body in the one direction (second direction Y)) in the one direction (second direction Y) of the holding body 100 except for the region where the optical sensor 300 is attached. It may be provided on the holding body 100 over 90% or more and 100% or less of the total length excluding the area where the optical sensor 300 is attached.
  • the light source 200 is provided only in a part of the holding body 100 in one direction (second direction Y) (for example, one-third or more of the total length of the holding body 100 in the one direction (second direction Y)). It may be.
  • the optical sensor 300 is, for example, an imaging unit such as a camera.
  • the object recognition device 10 has a cover 302 that covers the sensor body (for example, a lens of a camera). If the cover 302 is not provided, the sensor body is exposed. In this case, a person who approaches the object recognition device 10 may have anxiety that is being monitored by the optical sensor 300 (sensor body). On the other hand, when the cover 302 is provided, it is possible to prevent a person who approaches the object recognition device 10 from having such anxiety. However, the object recognition device 10 does not have to have the cover 302.
  • the optical sensor 300 is located on the side of the holding body 100 facing the space S (the surface on the negative direction side of the first direction X).
  • the optical sensor 300 is positioned so as to deviate from the light source 200 along the above-mentioned one direction (second direction Y) of the holding body 100.
  • the optical sensor 300 is attached to one end of the holding body 100 (upper end: the end on the positive direction side of the second direction Y).
  • the optical sensor 300 is positioned at a position deviated from one end of the holding body 100 (upper end: the end on the positive direction side of the second direction Y) in the above-mentioned one direction (second direction Y) of the holding body 100 (for example, the holding body 100). It may be attached to the center of the holder 100 in the above-mentioned one direction (second direction Y).
  • the field of view of the optical sensor 300 (for example, the center line of the field of view of the optical sensor 300) is the space S, the front of the space S (negative direction of the third direction Z), or the back of the space S (for example, the center line of the field of view of the optical sensor 300).
  • the direction (for example, the negative direction of the first direction X and the negative direction of the first direction X from the position where the optical sensor 300 is located) are oblique to the one direction (second direction Y) of the holding body 100 toward the positive direction of the third direction Z). It is oriented in the direction between the two directions Y and the negative direction).
  • the field of view of the optical sensor 300 When viewed from the front (negative direction of the third direction Z) or the rear (positive direction of the third direction Z) of the space S, the field of view of the optical sensor 300 expands as the distance from the position where the optical sensor 300 is located increases. Therefore, suppose that the field of view of the optical sensor 300 (for example, the center line of the field of view of the optical sensor 300) is the space S, the front of the space S (the negative direction of the third direction Z), or the space from the position where the optical sensor 300 is located. A direction (for example, a negative of the first direction X from the position where the optical sensor 300 is located) toward the rear of S (the positive direction of the third direction Z) and perpendicular to the one direction (second direction Y) of the holding body 100.
  • the field of view of the optical sensor 300 for example, the center line of the field of view of the optical sensor 300
  • a direction for example, a negative of the first direction X from the position where the optical sensor 300 is located
  • the rear of S
  • the region of the space S adjacent to the optical sensor 300 in the above-mentioned one direction (second direction Y) of the holding body 100 can be a blind spot in the field of view of the optical sensor 300. ..
  • a region adjacent to the optical sensor 300 in the above-mentioned one direction (second direction Y) of the holding body 100 for example, below the optical sensor 300 in the space S (for example).
  • a region (located in the negative direction of the second direction Y) can be included in the field of view of the optical sensor 300.
  • the field of view of the optical sensor 300 (for example, the center line of the field of view of the optical sensor 300) is the space S, the front of the space S (negative direction of the third direction Z), or the space S from the position where the optical sensor 300 is located. It may be directed to the rear (positive direction of the third direction Z) in a direction (for example, a negative direction of the first direction X) orthogonal to the one direction (second direction Y) of the holding body 100.
  • the optical sensor 300 is attached to one end of the holding body 100 (upper end: the end on the positive direction side of the second direction Y). Therefore, when viewed from the front (negative direction of the third direction Z) or the rear (positive direction of the third direction Z) of the space S, the center line of the field of view of the optical sensor 300 is diagonally below the position where the optical sensor 300 is located.
  • the space S When extending toward (the direction between the negative direction of the first direction X and the negative direction of the second direction Y), the space S is forward (negative direction of the third direction Z) or rearward (third direction).
  • the entire field of view of the optical sensor 300 can include almost the entire area of the space S.
  • the field of view of the optical sensor 300 expands in the anteroposterior direction (third direction Z) of the space S from the optical sensor 300 toward the space S (from the positive direction of the first direction X to the negative direction of the first direction X). You may.
  • the front end (negative direction side of the third direction Z) of the field of view of the optical sensor 300 is the space S. It may reach the front (negative direction of the third direction Z), and the end of the field of view of the optical sensor 300 on the rear side (positive direction side of the third direction Z) of the space S is behind the space S (third direction). It may reach the positive direction of Z).
  • the center line of the field of view of the optical sensor 300 extends toward the front of the space S (negative direction of the third direction Z)
  • the rear side of the space S of the field of view of the optical sensor 300 (the third direction Z).
  • the end on the positive direction side may reach the space S, or may reach the rear side of the space S (the positive direction of the third direction Z).
  • the center line of the field of view of the optical sensor 300 extends toward the rear of the space S (positive direction of the third direction Z)
  • the front side of the field of view of the optical sensor 300 negative of the third direction Z
  • the end (on the direction side) may reach the space S, or may reach the front of the space S (the negative direction of the third direction Z).
  • the optical sensor 300 may be movably attached to the holding body 100 in the above-mentioned one direction (second direction Y) of the holding body 100.
  • the position of the optical sensor 300 can be appropriately adjusted according to the usage status of the object recognition device 10.
  • the optical sensor 300 is slidable along a rail provided on a predetermined surface of the holder 100 (for example, a surface provided with the light source 200 or a surface different from the surface provided with the light source 200). May be good.
  • the optical sensor 300 may be immovably fixed to the holder 100.
  • one end (upper end) of the holding body 100 (upper end: the end on the positive direction side of the second direction Y) and the other end (lower end: the end on the negative direction side of the second direction Y) of the holding body 100.
  • the optical sensor 300 is attached only to the end on the positive direction side of the second direction Y). However, the optical sensor 300 is attached to both one end (upper end: the end on the positive direction side of the second direction Y) and the other end (the lower end: the end on the negative direction side of the second direction Y) of the holding body 100. May be good.
  • the area in which the object can be recognized by the object recognition device 10 is the field of view of the optical sensor 300 attached to one end of the holding body 100 (upper end: the end on the positive direction side of the second direction Y) and the holding body 100. Can complement each other with the visual field of the optical sensor 300 attached to the other end (lower end: the end on the negative direction side of the second direction Y).
  • the optical sensor 300 attached in addition to the optical sensor 300 attached to one end of the holding body 100 is the above-mentioned one direction (second direction Y) of the holding body 100.
  • the holding body 100 may be attached at a position deviated from the other end (lower end: the end on the negative direction side of the second direction Y). Further, the number of optical sensors 300 attached to the holder 100 does not have to be one or two, and may be three or more. That is, at least one optical sensor 300 can be attached to the holder 100.
  • FIG. 2 is a perspective view of the object recognition device 10 according to the second embodiment.
  • the object recognition device 10 according to the second embodiment is the same as the object recognition device 10 according to the first embodiment except for the following points.
  • the object recognition device 10 includes a pair of holding bodies 100.
  • the pair of holding bodies 100 face each other substantially in parallel with respect to the space S.
  • “Substantially parallel” means not only that the pair of holding bodies 100 are arranged exactly in parallel, but also that one of the pair of holding bodies 100 is at a slight angle with respect to the other of the pair of holding bodies 100.
  • one of the pair of holding bodies 100 is parallel to the second direction Y, and the other of the pair of holding bodies 100 is tilted by 2.5 degrees or less (for example, in FIG. 2) from the second direction Y. It also means that it is tilted by a slight angle toward a direction perpendicular to the second direction Y (for example, the first direction X or the third direction Z).
  • the pair of holding bodies 100 may not be substantially parallel to each other, and may be inclined to face each other at an angle. Further, the pair of holding bodies 100 may be inclined from the vertical direction (second direction Y) to the horizontal direction (for example, the first direction X or the third direction Z), or may be inclined in the horizontal direction (for example, the third direction Z). , 1st direction X or 3rd direction Z) may be substantially parallel.
  • the lower ends of each of the pair of holding bodies 100 are aligned in the vertical direction (second direction Y) of the space S, and the pair of holding bodies 100 The upper ends of each (the end on the negative direction side of the second direction Y) are aligned in the vertical direction (second direction Y) of the space S.
  • the lower ends of each of the pair of holding bodies 100 may be displaced in the vertical direction (second direction Y) of the space S, and each of the pair of holding bodies 100 (The end on the negative direction side of the second direction Y) may be displaced in the vertical direction (second direction Y) of the space S.
  • the light source 200 and the optical sensor 300 are attached to each of the pair of holding bodies 100.
  • the light source 200 may be attached to only one of the pair of holding bodies 100 (for example, the holding body 100 on the positive direction side of the first direction X), and the optical sensor 300 may be attached to, for example, the pair of holding bodies 100. It may be attached only to the other side of the body 100 (for example, the holding body 100 on the negative direction side of the first direction X). That is, the light source 200 can be attached to at least one of the pair of holding bodies 100, and the optical sensor 300 can be attached to at least the other of the pair of holding bodies 100.
  • the other of the pair of holding bodies 100 (holding body 100 on the negative direction side of the first direction X) and the light source 200 and the optical sensor 300 attached to the other holding body 100 are the same elements. It has a configuration (for example, the shape of the holder 100, the wavelength of the light of the light source 200, the wavelength detected by the optical sensor 300), and is in front of the space S (negative direction of the third direction Z) or behind (third direction). It is arranged rotationally symmetrically with respect to the center of the space S when viewed from the positive direction of the direction Z).
  • the object recognition device 10 can be formed by appropriately arranging these two elements. Therefore, the formation of the object recognition device 10 can be simplified as compared with the case where these two elements have different configurations from each other. However, these two elements may contain different configurations.
  • the number of holders 100 of the object recognition device 10 is not limited to the number (2) according to the present embodiment.
  • the object recognition device 10 may include three or more holders 100. That is, the object recognition device 10 can include a plurality of holding bodies 100.
  • the light source 200 attached to is opposed to the light source 200 with the space S in between.
  • the optical sensor 300 attached to one of the pair of holding bodies 100 is the upper end of the holding body 100 (the end on the positive direction side of the second direction Y). It is attached to.
  • the optical sensor 300 attached to the other of the pair of holding bodies 100 is the lower end of the other holding body 100 (negative in the second direction Y). It is attached to the end on the directional side).
  • the optical sensor 300 attached to one of the pair of holding bodies 100 is said to be in the one direction (second direction Y) of the one holding body 100.
  • the optical sensor 300 attached to the other of the pair of holding bodies 100 is said to be in the one direction (second direction Y) of the other holding body 100. It may be attached at a position deviated from the lower end of the other holding body 100 (the end on the negative direction side of the second direction Y).
  • the optical sensor 300 attached to the) is one of the pair of holding bodies 100 (holding body 100 on the positive direction side of the first direction X) or the other (holding body 100 on the negative direction side of the first direction X). They face each other in one direction (second direction Y) diagonally.
  • the area where the object can be recognized by the object recognition device 10 is paired with the field of view of the optical sensor 300 attached to one of the pair of holding bodies 100 (the holding body 100 on the positive direction side of the first direction X).
  • the field of view of the optical sensor 300 attached to the body 100) is the same region of the space S, the front of the space S (negative direction of the third direction Z), and the rear of the space S (positive direction of the third direction Z). It may be directed to.
  • the two optical sensors 300 when the field of view of the optical sensor 300 attached to one of the pair of holding bodies 100 (the holding body 100 on the positive direction side of the first direction X) is directed to the space S, the other (holding body 100 of the pair of holding bodies 100) The field of view of the optical sensor 300 attached to the holder 100) on the negative direction side of the first direction X is also directed to the space S.
  • the two optical sensors 300 In this case, in the region where the fields of view of these two optical sensors 300 are directed, as compared with the case where the field of view of only one optical sensor 300 is directed to this region, the two optical sensors 300 The blind spot in the visual field can be reduced more reliably.
  • the field of view of the optical sensor 300 attached to the body 100) is different from the space S, the front of the space S (negative direction of the third direction Z) and the rear of the space S (positive direction of the third direction Z). It may be directed to.
  • the field of view of the optical sensor 300 attached to one of the pair of holding bodies 100 (holding body 100 on the positive direction side of the first direction X) is directed to the front of the space S (negative direction of the third direction Z).
  • the field of view of the optical sensor 300 attached to the other of the pair of holding bodies 100 is directed to the rear of the space S (the positive direction of the third direction Z). ..
  • the area in which the object can be recognized by the object recognition device 10 can be expanded from the front side (negative direction of the third direction Z) to the rear side (positive direction of the third direction Z) of the space S.
  • the arrangement of the optical sensors 300 attached to each of the pair of holding bodies 100 is not limited to the arrangement according to the present embodiment.
  • the optical sensor 300 attached to the body 100) is one of the pair of holding bodies 100 (holding body 100 on the positive direction side of the first direction X) or the other (holding body 100 on the negative direction side of the first direction X). May face a direction (for example, the first direction X) orthogonal to the above one direction (second direction Y).
  • the wavelength of the light emitted by the light source 200 and the wavelength of the light detected by the optical sensor 300 are appropriately selected according to the application of the object recognition device 10. For example, these wavelengths are as follows.
  • the light emitted by the light source 200 is white light
  • the light detected by the optical sensor 300 is RGB (Red Blue Green) light.
  • the light source 200 has white illumination and the optical sensor 300 has an RGB camera.
  • the object recognition device 10 can recognize an object such as a person or an article by the color image obtained by the optical sensor 300.
  • the light emitted by the light source 200 is infrared light
  • the light detected by the optical sensor 300 is infrared light
  • the light source 200 has infrared illumination
  • the optical sensor 300 has an infrared camera.
  • the intensity of the light (infrared light) emitted from the light source 200 can be increased without giving glare to a person near the object recognition device 10.
  • the light emitted by the light source 200 is both white light and infrared light
  • the light detected by the optical sensor 300 is both RGB light and infrared light
  • the light source 200 has both white illumination and infrared illumination
  • the optical sensor 300 has both an RGB camera and an infrared camera.
  • the infrared camera can recognize the movement of an object such as a person or a person
  • the RGB camera can recognize the type of the object such as a person or a person.
  • the light source 200 continuously irradiates light (for example, at least one of white light and infrared light).
  • the light source 200 may intermittently irradiate light (for example, at least one of white light and infrared light).
  • the light source 200 may have, for example, strobe illumination. In this case, it is possible to suppress motion blur of an object such as a person or an article as compared with the case where light is continuously irradiated.
  • FIG. 3 shows an optical sensor 300 (FIG. 2) in which the field of view is directed from the lower side (negative direction of the second direction Y) to the upper side (positive direction of the second direction Y) in the vertical direction (second direction Y).
  • 1 is a diagram for explaining a first example of the optical sensor 300) on the negative direction side of the first direction X.
  • the optical sensor 300 whose field of view is directed from the lower side (negative direction of the second direction Y) to the upper side (positive direction of the second direction Y) in the vertical direction (second direction Y) (negative of the first direction X in FIG. 2).
  • the optical sensor 300) on the directional side may be covered with a half mirror 312.
  • the person approaching the object recognition device 10 (bright side with respect to the side where the optical sensor 300 is located). Is clearly visible through the half mirror 312, while the person approaching the object recognition device 10 (the bright side with respect to the side where the optical sensor 300 is located) sees the optical sensor 300 (the person approaching the object recognition device 10).
  • the dark side with respect to the located side) is almost invisible by the half mirror 312. Therefore, it is possible to prevent a person who approaches the object recognition device 10 from having anxiety that the optical sensor 300 is monitoring the object from below (the negative direction of the second direction Y).
  • the optical sensor 300 (the first direction in FIG. 2) whose field of view is directed from the upper side (the positive direction of the second direction Y) to the lower side (the negative direction of the second direction Y) in the vertical direction (second direction Y).
  • the optical sensor 300) on the positive side of X may not be covered by the half mirror, or may be covered.
  • the optical sensor 300 on the negative direction side of the sensor 300) is covered by the half mirror 312, while the field of view is from the upper side (the positive direction of the second direction Y) to the lower side (the second direction) in the vertical direction (second direction Y).
  • the optical sensor 300 (the optical sensor 300 on the positive direction side of the first direction X in FIG. 2) directed in the negative direction of Y) may not be covered by the half mirror.
  • the optical sensor 300 (the first direction in FIG. 2) whose field of view is directed from the upper side (the positive direction of the second direction Y) to the lower side (the negative direction of the second direction Y) in the vertical direction (second direction Y).
  • the amount of light detected by the optical sensor 300) on the positive direction side of X can be increased as compared with the case where the half mirror is provided.
  • FIG. 4 shows an optical sensor 300 (FIG. 2) in which the field of view is directed from the lower side (negative direction of the second direction Y) to the upper side (positive direction of the second direction Y) in the vertical direction (second direction Y).
  • 1 is a diagram for explaining a second example of the optical sensor 300) on the negative direction side of the first direction X.
  • the optical sensor 300 (cover 302) whose field of view is directed from the lower side (negative direction of the second direction Y) to the upper side (positive direction of the second direction Y) in the vertical direction (second direction Y) (first in FIG. 2).
  • the front side portion (the portion on the negative direction side of the third direction Z) of the optical sensor 300 (cover 302) on the negative direction side of the direction X may be covered with the shield 314.
  • the optical sensor 300 (cover 302) is hidden by the shield 314 from a person located in front of the space S (negative direction of the third direction Z). Therefore, the person located in front of the space S (negative direction of the third direction Z) does not have anxiety that the optical sensor 300 is monitoring from below (negative direction of the second direction Y).
  • the shield body 314 it is possible to prevent the optical sensor 300 from detecting an object such as a person located in front of the space S (the negative direction of the third direction Z). Therefore, the privacy of a person located in front of the space S (negative direction of the third direction Z) can be protected.
  • the optical sensor 300 (cover 302) whose field of view is directed upward (negative direction of the second direction Y) from above (positive direction of the second direction Y) in the vertical direction (second direction Y) (first in FIG. 2).
  • the front side portion (the portion on the negative direction side of the third direction Z) of the optical sensor 300 (cover 302) on the positive direction side of the direction X may or may not be covered by a shield. good.
  • FIG. 5 is a diagram showing a first modification of FIG. 2.
  • the object recognition device 10 further includes two spacers 110. Each spacer 110 is connected to each of the pair of holders 100. One of the two spacers 110 (the spacer 110 on the positive direction side of the second direction Y) is connected to the upper end side of each of the pair of holders 100 (the positive direction side of the second direction Y). On the other hand, the other of the two spacers 110 (the spacer 110 on the negative direction side of the second direction Y) is connected to the lower end side of each of the pair of holding bodies 100 (the negative direction side of the second direction Y). There is.
  • the object recognition device 10 may include only one spacer 110, or may include three or more spacers 110. That is, the object recognition device 10 can be provided with at least one or more spacers 110.
  • each spacer 110 can be expanded and contracted between the pair of holding bodies 100 along the left-right direction (first direction X) of the space S.
  • each spacer 110 may have a tubular member and a stretch member movably inserted into the tubular member.
  • the length of each spacer 110 in the stretching direction (first direction X) can be adjusted by moving the stretching member with respect to the tubular member.
  • the structure for adjusting the length of each spacer 110 in the stretching direction (first direction X) is not limited to this example. Further, each spacer 110 does not have to be stretchable between the pair of holding bodies 100.
  • the distance between the pair of holding bodies 100 is maintained. Can be adjusted to an appropriate length.
  • Each spacer 110 may be transparent. In this case, an object existing behind each spacer 110 (positive direction of the third direction Z) when viewed from the front of the space S (negative direction of the third direction Z) can be seen through each spacer 110. Can be done. However, each spacer 110 does not have to be transparent.
  • FIG. 6 is a diagram showing a second modification of FIG. 2.
  • the object recognition device 10 includes a pair of stretchable guide members 120.
  • Each guide member 120 is, for example, a string-type measure or a fold-type measure.
  • each stretched guide member 120 is shown.
  • Each of the retracted guide members 120 (for example, a wound string-type measure or a folded fold-type measure) is provided in advance at a predetermined position (for example, in the vicinity of the optical sensor 300) of each holding body 100.
  • Each of the contracted guide members 120 is extended, and each of the extended guide members 120 is placed on the other holding body 100 (for example, the end of the holding body 100 located on the opposite side of the holding body 100 where the optical sensor 300 is provided). It is attached to an engaging member such as a hook provided in advance).
  • an engaging member such as a hook provided in advance
  • the pair of guide members 120 intersect between the pair of holding bodies 100. Specifically, one end and the other end of one of the pair of guide members 120 (the guide member 120 extending in the direction between the positive direction of the first direction X and the positive direction of the second direction Y), respectively. , The upper end of one of the pair of holding bodies 100 (holding body 100 on the positive direction side of the first direction X) (the end on the positive direction side of the second direction Y) and the other of the pair of holding bodies 100 (of the first direction X). It is fixed to the lower end (the end on the negative direction side of the second direction Y) of the holding body 100) on the negative direction side.
  • one end and the other end of the other side of the pair of guide members 120 are paired, respectively.
  • One end of the holding body 100 (the holding body 100 on the positive direction side of the first direction X) (the end on the negative direction side of the second direction Y) and the other end of the pair of holding bodies 100 (the negative direction side of the first direction X). It is fixed to the upper end (the end on the positive direction side of the second direction Y) of the holding body 100).
  • the pair of guide members 120 intersect between the pair of holding bodies 100, and the optical sensors 300 attached to each of the pair of holding bodies 100 are in appropriate positions.
  • Arranged for example, a straight line connecting each optical sensor 300 when viewed from the front (negative direction of the third direction Z) or the rear (positive direction of the third direction Z) of the space S passes through the center of the space S).
  • a mark may be provided in advance in the predetermined portion (for example, the center) of each guide member 120.
  • the pair of holding bodies 100 optical sensors 300 attached to each of the pair of holding bodies 100
  • FIG. 7 is a diagram showing a third modification of FIG. 2.
  • the object recognition device 10 further includes a motion sensor 402.
  • the motion sensor 402 detects a person located in front of the object recognition device 10 (negative direction in the third direction Z).
  • the human sensor 402 is various sensors capable of detecting a person, for example, an optical sensor such as an infrared sensor or a visible light sensor, or a sound sensor (for example, a microphone) such as an ultrasonic sensor or an audible sound sensor.
  • the motion sensor 402 is provided on the front surface side (the surface on the negative direction side of the third direction Z) of each holding body 100.
  • the motion sensor 402 is easy to detect. However, as long as the motion sensor 402 can detect a person located in front of the object recognition device 10 (negative direction of the third direction Z), the motion sensor 402 is on the front surface of each holding body 100 (in the third direction Z). It may be provided at a position different from the negative direction side surface) side.
  • the operating state of at least one of the light source 200 and the optical sensor 300 attached to each holding body 100 can be switched according to the detection result of the motion sensor 402.
  • the amount of light emitted from the light source 200 is in front of the object recognition device 10 (when the motion sensor 402 detects a person located in front of the object recognition device 10 (negative direction of the third direction Z). It may be higher than when the motion sensor 402 does not detect a person located in the negative direction of the third direction Z).
  • the light source 200 may irradiate light, while the object recognition device 10 may irradiate the light source 200.
  • the light source 200 does not have to irradiate light.
  • the optical sensor 300 may be stopped when the motion sensor 402 does not detect a person located in front of the object recognition device 10 (negative direction of the third direction Z), and may be stopped in front of the object recognition device 10 (third direction Z). It may be activated when the motion sensor 402 detects a person located in the negative direction of the three directions Z). In this case, it is not necessary to constantly operate the light source 200 and the optical sensor 300. Therefore, the power consumption of the object recognition device 10 can be reduced as compared with the case where the light source 200 and the optical sensor 300 are constantly operated.
  • the motion sensor 402 is attached to each of the pair of holding bodies 100.
  • the motion sensor 402 may be attached to only one of the pair of holding bodies 100. That is, the motion sensor 402 can be attached to at least one of the pair of holding bodies 100. Further, the position where the motion sensor 402 is attached is not limited to the position shown in FIG. 7.
  • FIG. 8 is a diagram showing a fourth modified example of FIG.
  • the object recognition device 10 further includes a display unit 404.
  • the display unit 404 is directed to the front of the object recognition device 10 (the negative direction of the third direction Z).
  • the display unit 404 is various displays, for example, a liquid crystal display or an organic electroluminescence (EL) display. Further, the display unit 404 may be a touch screen. When the display unit 404 is a touch screen, the user of the object recognition device 10 can use the display unit 404 to give an instruction for operating the object recognition device 10 to the object recognition device 10.
  • EL organic electroluminescence
  • the orientation of the image displayed by the display unit 404 can be switched according to the posture of the holder 100 to which the display unit 404 is attached.
  • the orientation of the image displayed by the display unit 404 is, for example, a predetermined reference direction of the image displayed by the display unit 404 (for example, an upward or downward direction of the image displayed by the display unit 404) of the holding body 100. It means in which direction the holder 100 is oriented with respect to a predetermined position (for example, one end of the holder 100 where the optical sensor 300 is provided).
  • the posture of the holding body 100 means that, for example, a predetermined position of the holding body 100 (for example, one end of the holding body 100 where the optical sensor 300 is provided) is above the vertical direction (second direction Y) (second direction Y).
  • the posture of the holder 100 is detected, for example, by a sensor that detects the posture of the holder 100 (for example, a gyro sensor attached to the holder 100).
  • the orientation of the image displayed by the display unit 404 does not switch according to the posture of the holding body 100, and the optical sensor 300 of the holding body 100 is provided in the upward direction of the image displayed by the display unit 404.
  • the display unit 404 attached to the holding body 100 When it is directed to one end, it is displayed by the display unit 404 attached to the holding body 100 on the left side (positive direction side of the first direction X) when viewed from the front side of the space S (negative direction of the third direction Z).
  • the image displayed by is displayed upside down.
  • the display unit 404 attached to the holding body 100 on the right side (negative direction side of the first direction X) when viewed from the front side of the space S (negative direction of the third direction Z).
  • the orientation of the displayed image is switched according to the posture of the holding body 100 so that the image is not displayed upside down.
  • the display unit 404 is attached to each of the pair of holding bodies 100.
  • the display unit 404 may be attached to only one of the pair of holding bodies 100. That is, the display unit 404 can be attached to at least one of the pair of holding bodies 100. Further, the position where the display unit 404 is attached is not limited to the position shown in FIG.
  • FIG. 9 is a diagram showing a fifth modification of FIG. 2.
  • the object recognition device 10 further includes a sound sensor 406.
  • the sound sensor 406 is, for example, a microphone.
  • the object recognition device 10 can perform the following processing, for example, using the detection result of the sound sensor 406.
  • the sound sensor 406 may detect the sound generated when the goods such as goods are settled. That is, when the sound sensor 406 detects the sound generated when the goods such as goods are settled, the object recognition device 10 can determine that the payment of the goods such as goods has been completed, and the sound sensor 406 can determine that the payment of the goods such as goods has been completed. When the sound generated when the goods such as goods are settled is not detected, it can be determined that the payment of the goods such as goods has not been completed.
  • the sound sensor 406 may detect various abnormal sounds such as abnormal sounds related to goods such as products and abnormal sounds in the store.
  • Abnormal sounds related to goods such as goods include, for example, sounds generated when goods such as goods are destroyed. These abnormal sounds can be stored in advance in the object recognition device 10 or an external device (for example, a server) that can communicate or connect to the object recognition device 10.
  • the object recognition device 10 can determine an abnormal sound related to an article such as a product by referring to the stored sound.
  • the abnormal sound related to an article such as a product may further include a sound generated when the furniture used together with the article such as a product is destroyed.
  • the abnormal sound in the store includes, for example, a scream, a fighting sound, an angry voice, a crime prevention buzzer, etc. in the vicinity of the object recognition device 10.
  • the sound sensor 406 may detect the entrance sound of the customer.
  • the sound sensor 406 may detect a sound (for example, voice) of an instruction for operating the object recognition device 10.
  • a sound for example, voice
  • various processes for example, settlement of goods such as goods
  • the object recognition device 10 can be performed by sound such as voice without using the display unit 404 (touch screen).
  • the sound sensor 406 is attached to each of the pair of holders 100.
  • the sound sensor 406 may be attached to only one of the pair of holders 100. That is, the sound sensor 406 can be attached to at least one of the pair of holders 100.
  • the position where the sound sensor 406 is attached is not limited to the position shown in FIG. Further, when the sound sensors 406 are attached to both of the pair of holding bodies 100, the two sound sensors 406 may be arranged so as to detect the stereo sound.
  • FIG. 10 is a diagram showing a sixth modified example of FIG.
  • the object recognition device 10 further includes a sound source 408.
  • the sound source 408 is, for example, a speaker.
  • the object recognition device 10 can perform the following processing, for example, using the sound source 408.
  • the sound source 408 outputs a sound (for example, voice) for assisting the user (for example, a customer in a store) to use the object recognition device 10.
  • a sound for example, voice
  • the sound source 408 outputs a sound (for example, voice) prompting payment when the sound sensor 406 does not detect the sound generated when the goods such as goods are settled.
  • the sound source 408 when the above-mentioned sound sensor 406 detects various abnormal sounds such as abnormal sounds related to goods such as products and abnormal sounds in the store, various sounds (for example, various sounds (for example) are obtained according to the abnormal sounds. A security buzzer sound) may be output.
  • various abnormal sounds such as abnormal sounds related to goods such as products and abnormal sounds in the store
  • various sounds for example, various sounds (for example) are obtained according to the abnormal sounds.
  • a security buzzer sound may be output.
  • the sound source 408 uses attribute information of an article such as a product (for example, the taste of the product) according to various detection results of the object recognition device 10 (for example, the detection result of the optical sensor 300 or the detection result of the depth sensor 410 described later).
  • a sound for example, voice
  • a deadline may be output.
  • the sound source 408 is attached to each of the pair of holders 100.
  • the sound source 408 may be attached to only one of the pair of holders 100. That is, the sound source 408 can be attached to at least one of the pair of holding bodies 100.
  • the position where the sound source 408 is attached is not limited to the position shown in FIG.
  • the two sound sources 408 may be arranged so as to form a stereo sound.
  • FIG. 11 is a diagram showing a seventh modification of FIG. 2.
  • the object recognition device 10 includes a depth sensor 410.
  • the depth sensor 410 is, for example, a depth camera.
  • a plurality of depth sensors 410 are attached to each holding body 100, and the plurality of depth sensors 410 attached to each holding body 100 are in the above-mentioned one direction (second direction Y) of each holding body 100. Lined up in.
  • the detection range of each depth sensor 410 is directed to the rear of the space S (the positive direction of the third direction Z). In this case, the position of the object located behind the space S (the positive direction of the third direction Z) in the left-right direction (first direction X) of the space S is accurate as compared with the case where the depth sensor 410 is not used. It becomes possible to specify to.
  • each depth sensor 410 attached to each holding body 100 has a depth sensor 410. It can be provided for each stage in the accommodating portion 22 in which articles such as goods are accommodating. In this case, the position of the article such as a product in each stage of the accommodating portion 22 in the left-right direction (first direction X) can be accurately specified as compared with the case where the depth sensor 410 is not used.
  • the depth sensor 410 may be attached to only one of the pair of holding bodies 100. That is, the depth sensor 410 can be attached to at least one of the pair of holding bodies 100. Further, the position where the depth sensor 410 is attached is not limited to the position shown in FIG. Further, the number of depth sensors 410 attached to each holding body 100 may be only one. That is, at least one depth sensor 410 can be attached to at least one of the pair of holders 100.
  • FIG. 12 is a diagram showing an eighth modification of FIG. 2.
  • Each of the upper part (the part on the positive direction side of the second direction Y) and the lower part (the part on the negative direction side of the second direction Y) of each holding body 100 has an element (for example, a light source) attached to each holding body 100.
  • a hole 102 is formed for exhausting the heat generated from the 200 or the optical sensor 300). Heat is exhausted by utilizing convection through holes 102 formed in each of the upper portion (the portion on the positive direction side of the second direction Y) and the lower portion (the portion on the negative direction side of the second direction Y) of each holding body 100. can do.
  • the area of the hole 102 formed in the upper part of each holding body 100 (the part on the positive direction side of the second direction Y) is formed in the lower part of each holding body 100 (the part on the negative direction side in the second direction Y). It is larger than the area of the hole 102.
  • the area of the hole 102 formed in the upper portion of each holding body 100 (the portion on the positive direction side of the second direction Y) is located in the lower portion of each holding body 100 (the portion on the negative direction side of the second direction Y).
  • the amount of heat exhausted from the holes 102 formed in the upper part of each holding body 100 (the portion on the positive direction side of the second direction Y) can be increased as compared with the case where the area of the formed holes 102 or less is smaller. ..
  • FIG. 13 is a diagram showing a ninth modification of FIG. 2.
  • a heat radiating member 104 is provided on the upper part of each holding body 100 (the portion on the positive direction side of the second direction Y) (the upper part inside each holding body 100).
  • the heat radiating member 104 is, for example, a metal plate or a heat radiating sheet. The heat generated from the element (for example, the light source 200 or the optical sensor 300) attached to each holding body 100 can be released to the outside of each holding body 100 by the heat radiating member 104.
  • each holding body 100 is provided on the upper portion of each holding body 100 (the portion on the positive direction side of the second direction Y) rather than the lower portion of each holding body 100 (the portion on the negative direction side of the second direction Y).
  • the position where the heat radiating member 104 is attached is not limited to the position according to this modification.
  • FIG. 14 is a diagram showing a tenth modification of FIG. 2.
  • the object recognition device 10 further includes a communication unit 502.
  • the communication unit 502 is, for example, an antenna.
  • the object recognition device 10 can communicate with an external device (for example, a server) of the object recognition device 10 via the communication unit 502.
  • the communication unit 502 is attached to each of the pair of holding bodies 100. Further, the communication unit 502 attached to each holding body 100 is located above the center of each holding body 100 in the one direction (second direction Y) (positive direction in the second direction Y). In this case, the communication unit 502 attached to each holding body 100 is located below the center of each holding body 100 in the one direction (second direction Y) (negative direction of the second direction Y).
  • the position of the communication unit 502 in the vertical direction (second direction Y) can be raised, and the communication unit 502 can easily communicate with an external device (for example, a server) of the object recognition device 10.
  • the communication unit 502 attached to each holding body 100 may be located at the center of each holding body 100 in the one direction (second direction Y), or may be located in the one direction (second direction Y) of each holding body 100. It may be located below the center in the second direction Y) (negative direction of the second direction Y).
  • FIG. 15 is a diagram showing an eleventh modification of FIG. 2.
  • the object recognition device 10 further includes a power supply 504.
  • the power source 504 supplies power to an element (eg, a light source 200 or an optical sensor 300) attached to each holder 100.
  • the power supply 504 is attached to each of the pair of holding bodies 100. Further, the power supply 504 attached to each holding body 100 is located below the center of each holding body 100 in the one direction (second direction Y) (negative direction of the second direction Y). In this case, when the wiring connected to the power supply 504 is provided near the installation surface of the object recognition device 10, the power supply 504 attached to each holding body 100 is in the above-mentioned one direction (first direction) of each holding body 100.
  • the distance between the power supply 504 and the wiring connected to the power supply 504 can be shortened as compared with the case where the power supply 504 is located above the center in the two-direction Y) (the negative direction of the second direction Y). can.
  • the power supply 504 attached to each holding body 100 may be located at the center of each holding body 100 in the one direction (second direction Y), or may be located in the one direction (first direction Y) of each holding body 100. It may be located above the center in the two directions Y) (the positive direction of the second direction Y).
  • FIG. 16 is a diagram showing a twelfth modification of FIG.
  • the object recognition device 10 includes a communication device 506a and a communication wiring 506b.
  • the communication device 506a is attached to the other of the pair of holding bodies 100 (holding body 100 on the negative direction side of the first direction X). Further, the communication device 506a is electrically connected to the optical sensor 300 attached to the other of the pair of holding bodies 100 (the holding body 100 on the negative direction side of the first direction X).
  • the communication wiring 506b is attached to one of the pair of holding bodies 100 (holding body 100 on the positive direction side of the first direction X) and the other of the pair of holding bodies 100 (holding body 100 on the negative direction side of the first direction X). It is connected to the attached communication device 506a.
  • the communication wiring 506b is electrically connected to the optical sensor 300 attached to one of the pair of holding bodies 100 (the holding body 100 on the positive direction side of the first direction X).
  • the communication device 506a communicates with an external device (for example, a computer) of the object recognition device 10.
  • the detection result of the optical sensor 300 attached to the other of the pair of holding bodies 100 is obtained from the outside of the object recognition device 10 via the communication device 506a.
  • the detection result of the optical sensor 300 which can be transmitted to a device (for example, a computer) and is attached to one of the pair of holding bodies 100 (holding body 100 on the positive direction side of the first direction X), is the communication wiring 506b and It can be transmitted to an external device (for example, a computer) of the object recognition device 10 via the communication device 506a.
  • a device for example, a computer
  • an external device for example, a computer
  • FIG. 17 is a perspective view of the accommodating device 20 according to the third embodiment.
  • the accommodating device 20 includes an accommodating unit 22 and an object recognition device 10. Articles are stored in the storage unit 22.
  • the storage unit 22 is, for example, a shelf in which goods such as goods are stored in a store such as a retail store.
  • the object recognition device 10 according to the present embodiment is the same as the object recognition device 10 according to the second embodiment. That is, the object recognition device 10 has a pair of holding bodies 100. However, the object recognition device 10 may have only a single holder 100 in the same manner as the object recognition device 10 according to the first embodiment.
  • the accommodating portion 22 is located behind the space S between the pair of holding bodies 100 (in the positive direction of the third direction Z).
  • the accommodating portion 22 has a holding body 100.
  • the holding body 100 is attached to a portion of the frame of the accommodating portion 22 that extends in the vertical direction (second direction Y) of the accommodating device 20. That is, the object recognition device 10 (holding body 100) is attached to the accommodating portion 22 prepared in advance.
  • the holding body 100 may be a part of the accommodating portion 22 (for example, a portion of the frame of the accommodating portion 22 extending in the vertical direction (second direction Y) of the accommodating device 20) itself. That is, "the accommodating portion 22 has the holding body 100" may mean that the accommodating portion 100 is attached to the accommodating portion 22, or the retaining body 100 is a part of the accommodating portion 22 itself. It may mean that.
  • the object recognition device 10 may be used for various objects, for example, a person near the object recognition device 10 or in front of the object recognition device 10 (third direction Z).
  • a person in the negative direction extends his hand toward an article such as a product stored in the storage unit 22 via the space S, and an article such as a product stored in the storage unit 22 via the space S.
  • the accommodating device 20 (object recognition device 10) has a specific area with respect to the accommodating portion 22 (for example, the space S, the front of the space S (the forward direction of the third direction Z), or the rear of the space S (for example). It exists in (the negative direction of the third direction Z)), or exists in a specific area with respect to the accommodating portion 22 (for example, the space S, the front of the space S (the positive direction of the third direction Z), or the back of the space S (the third).
  • An object for example, an article such as a product or a person passing through (the negative direction of the three directions Z) can be recognized with high sensitivity.
  • FIG. 18 is a diagram for explaining a first example of the relationship between the light source 200 and the optical sensor 300 shown in FIG.
  • the light source 200 attached to one of the pair of holding bodies 100 includes a visible light light source 200a and an infrared light light source 200b.
  • the light source 200 attached to the other of the pair of holding bodies 100 also includes a visible light light source 200a and an infrared light light source 200b.
  • the optical sensor 300 attached to each of the pair of holders 100 can detect both RGB light and infrared light.
  • a white triangle having a point indicating the position of the visible light light source 200a as one apex indicates the irradiation range of visible light by the visible light light source 200a.
  • the irradiation range of visible light by the visible light light source 200a may reach a region further distant from the holder 100 than the range shown in FIG.
  • the line-hatched triangle having a point indicating the position of the infrared light source 200b as one vertex indicates the irradiation range of infrared light by the infrared light source 200b.
  • the irradiation range of infrared light by the infrared light source 200b may reach a region further distant from the holder 100 than the range shown in FIG.
  • the point-hatched triangle having a point indicating the position of the optical sensor 300 as one vertex indicates the field of view of the optical sensor 300.
  • the field of view of the optical sensor 300 may reach a region further away from the holder 100 than the range shown in FIG. The same applies to FIGS. 19 and 20 described later, except for the matters particularly described below.
  • the irradiation range of infrared light by the infrared light source 200b attached to each of the pair of holders 100 is directed to the front of the space S (negative direction of the third direction Z) (the side where the person U is located).
  • the irradiation range of visible light by the visible light light source 200a attached to each of the pair of holders 100 is behind the space S (the positive direction of the third direction Z) (the side where the accommodating portion 22 is located). Is aimed at. Therefore, by preventing the person U located in front of the space S (negative direction of the third direction Z) from being irradiated with visible light so much, the person located in front of the space S (negative direction of the third direction Z). It is possible to prevent U from feeling the glare of visible light.
  • the person U located in front of the space S (the negative direction of the third direction Z) can be detected mainly by infrared light rather than visible light.
  • FIG. 19 is a diagram for explaining a second example of the relationship between the light source 200 and the optical sensor 300 shown in FIG.
  • the point-hatched triangle having a point indicating the position of the optical sensor 300 on the positive direction side of the first direction X of the two optical sensors 300 as one vertex is the third of the two optical sensors 300.
  • the field of view of the RGB light of the optical sensor 300 on the positive direction side of the one direction X is shown.
  • the line-hatched triangle having a point indicating the position of the optical sensor 300 on the negative direction side of the first direction X of the two optical sensors 300 as one vertex is the third of the two optical sensors 300.
  • the field of view of the infrared light of the optical sensor 300 on the negative direction side of the one direction X is shown.
  • a light source 200 (infrared light light source 200b) that emits infrared light is attached to one of the pair of holding bodies 100 (holding body 100 on the positive direction side of the first direction X), whereas the pair of holding bodies 200 A light source 200 that emits infrared light is not attached to the other side of the body 100 (the holding body 100 on the negative direction side of the first direction X).
  • an optical sensor 300 for detecting infrared light is attached to the other of the pair of holding bodies 100 (holding body 100 on the negative direction side of the first direction X).
  • the infrared light emitted from the infrared light source 200b attached to one of the pair of holding bodies 100 is blocked by an object such as a person U or an article. This can be detected by the optical sensor 300 attached to the other of the pair of holding bodies 100 (the holding body 100 on the negative direction side of the first direction X).
  • FIG. 20 is a diagram for explaining a third example of the relationship between the light source 200 and the optical sensor 300 shown in FIG.
  • the length of each of the pair of holding bodies 100 in the vertical direction (second direction Y) of the space S in FIG. 20 is the pair of holding bodies in the vertical direction (second direction Y) of the space S in FIG. It is longer than each of the 100 lengths.
  • each lower end of each of the pair of holding bodies 100 (the end on the negative direction side of the second direction Y) is approximately below the knee of the person U located in front of the space S (the negative direction of the third direction Z). It reaches a height (for example, a height of 50 cm or less from the surface on which the accommodating device 20 is installed toward the upper side (the positive direction of the second direction Y)).
  • the visible light light source 200a is located above the infrared light light source 200b (positive direction in the second direction Y). More specifically, in each of the pair of holding bodies 100, the visible light light source 200a is deviated upward (positive direction in the second direction Y) from the center in the stretching direction (second direction Y) of each holding body 100. On the other hand, the infrared light source 200b is positioned so as to be offset downward (negative direction of the second direction Y) from the center in the stretching direction (second direction Y) of each holding body 100. Further, the optical sensor 300 attached to each of the pair of holding bodies 100 can detect both RGB light and infrared light.
  • Visible light is emitted from above the person U located in front of the space S (negative direction of the third direction Z) (positive direction of the second direction Y), and is emitted from the front of the space S (negative direction of the third direction Z).
  • Infrared light is emitted from below the person U located in (the negative direction of the second direction Y).
  • the space S It is possible to prevent the person U located in front (the negative direction of the third direction Z) from feeling the glare of visible light.
  • a retainer that extends in one direction and At least a part of a space attached to the holding body along the one direction and located on the side of the holding body with respect to the one direction of the holding body, in front of the space, and behind the space.
  • a light source that irradiates light toward
  • An optical sensor that is attached to the retainer and has at least a portion of the field of view directed within at least a portion of the space, the front of the space, and the rear of the space.
  • An object recognition device including. 2. 1. 1. 1.
  • the light source is attached to at least one of the pair of holding bodies.
  • 4. 3. 3. In the object recognition device described in The optical sensor attached to one of the pair of holding bodies and the optical sensor attached to the other of the pair of holding bodies are oblique in one direction of the one or the other of the pair of holding bodies. An object recognition device that faces the intersecting direction. 5. 1. 1. In the object recognition device according to any one of 1 to 4.
  • the holding body is an object recognition device attached to a housing portion in which articles are housed.

Abstract

物体認識装置(10)は、保持体(100)、光源(200)及び光学センサ(300)を備えている。保持体(100)は、一方向に延伸している。光源(200)は、上記一方向に沿って保持体(100)に取り付けられている。光源(200)は、保持体(100)の上記一方向に対して保持体(100)の側方に位置する空間(S)と、空間(S)の前方と、空間(S)の後方と、の少なくとも一部分に向けて光を照射する。光学センサ(300)は、保持体(100)に取り付けられている。光学センサ(300)の視野の少なくとも一部分は、空間(S)と、空間(S)の前方と、空間(S)の後方と、の少なくとも一部分内に向けられている。

Description

物体認識装置
 本発明は、物体認識装置に関する。
 近年、カメラ等の撮像部等の種々の光学センサを用いた物体認識装置が開発されている。例えば、特許文献1には、自動車に搭載される物体認識装置について記載されている。この物体認識装置は、投光ユニット及び受光ユニットを備えている。投光ユニットから照射された赤外光は、物体認識装置の外部に存在する対象物によって反射されて、受光ユニットによって受信される。また特許文献2には、光音響画像化装置について記載されている。この光音響画像化装置は、長尺形状の複数の光源体を備えている。
特開2005-77130号公報 特開2016-47210号公報
 物体認識装置は、様々な場合で用いられている。近年では、例えば、小売店等の店内において商品等の物品が収容される棚等の収容部の近くにいる人や、このような収容部に収容される商品等の物品等、様々な物体を認識するために物体認識装置が用いられることがある。このような場合を含め、物体認識装置が用いられる場合は、特定の領域内に存在し、又は特定の領域を通過する物体(例えば、商品等の物品や人)を物体認識装置によって高感度に認識することが要求される。
 本発明の目的の一例は、特定の領域内に存在し、又は特定の領域を通過する物体を高感度に認識することにある。本発明の他の目的は、本明細書の記載から明らかになるであろう。
 本発明の一態様は、
 一方向に延伸する保持体と、
 前記一方向に沿って前記保持体に取り付けられ、前記保持体の前記一方向に対して前記保持体の側方に位置する空間と、前記空間の前方と、前記空間の後方と、の少なくとも一部分に向けて光を照射する光源と、
 前記保持体に取り付けられ、前記空間と、前記空間の前方と、前記空間の後方と、の少なくとも一部分内に視野の少なくとも一部分が向けられている光学センサと、
を備える物体認識装置である。
 本発明の上記態様によれば、特定の領域内に存在し、又は特定の領域を通過する物体を高感度に認識することができる。
 上述した目的、および、その他の目的、特徴および利点は、以下に述べる好適な実施の形態、および、それに付随する以下の図面によって、さらに明らかになる。
実施形態1に係る物体認識装置の斜視図である。 実施形態2に係る物体認識装置の斜視図である。 図2において視野が鉛直方向の下方から上方に向けられている光学センサの第1例を説明するための図である。 図2において視野が鉛直方向の下方から上方に向けられている光学センサの第2例を説明するための図である。 図2の第1の変形例を示す図である。 図2の第2の変形例を示す図である。 図2の第3の変形例を示す図である。 図2の第4の変形例を示す図である。 図2の第5の変形例を示す図である。 図2の第6の変形例を示す図である。 図2の第7の変形例を示す図である。 図2の第8の変形例を示す図である。 図2の第9の変形例を示す図である。 図2の第10の変形例を示す図である。 図2の第11の変形例を示す図である。 図2の第12の変形例を示す図である。 実施形態3に係る収容装置の斜視図である。 図17に示した光源及び光学センサの関係の第1例を説明するための図である。 図17に示した光源及び光学センサの関係の第2例を説明するための図である。 図17に示した光源及び光学センサの関係の第3例を説明するための図である。
 以下、本発明の実施の形態について、図面を用いて説明する。なお、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。
(実施形態1)
 図1は、実施形態1に係る物体認識装置10の斜視図である。
 図1において、第1方向X、第2方向Y及び第3方向Zは、以下のようになる。後述する図においても同様である。第1方向Xは、後述する保持体100の側方に位置する空間Sの幅方向(水平方向)である。第1方向Xの正方向(第1方向Xを示す矢印によって示される方向)は、空間Sから保持体100に向かう方向である。第1方向Xの負方向(第1方向Xを示す矢印によって示される方向の反対方向)は、保持体100から空間Sに向かう方向である。第2方向Yは、第1方向Xに交差し、具体的には直交している。第2方向Yは、保持体100の側方に位置する空間Sの高さ方向(鉛直方向)である。第2方向Yの正方向(第2方向Yを示す矢印によって示される方向)は、空間Sの上方向である。第2方向Yの負方向(第2方向Yを示す矢印によって示される方向の反対方向)は、空間Sの下方向である。第3方向Zは、第1方向X及び第2方向Yの双方に交差し、具体的には直交している。第3方向Zは、保持体100の側方に位置する空間Sの前後行方向(水平方向)である。第3方向Zの正方向(第3方向Zを示す矢印によって示される方向)は、空間Sの前方から後方に向かう方向である。第3方向Zの負方向(第3方向Zを示す矢印によって示される方向の反対方向)は、空間Sの後方から前方に向かう方向である。
 第1方向X、第2方向Y及び第3方向Zは、上述した方向に限定されるものではない。上述した第1方向X、第2方向Y及び第3方向Zは、本実施形態における物体認識装置10の使用の一例における方向である。例えば、第2方向Yが鉛直方向から水平方向に向けて斜めに傾くように、物体認識装置10が用いられてもよい。また、空間Sの前後方向(第3方向Z)が鉛直方向に平行となる(第1方向X及び第2方向Yの双方が水平方向に平行になる)ように、物体認識装置10が用いられてもよい。さらに、第1方向Xが鉛直方向に平行となり、かつ第2方向Yが水平方向に平行となるように、物体認識装置10が用いられてもよい。
 図1を用いて、物体認識装置10の概要を説明する。物体認識装置10は、保持体100、光源200及び光学センサ300を備えている。保持体100は、一方向(保持体100の延伸方向:第2方向Y)に延伸している。光源200は、保持体100の上記一方向(第2方向Y)に沿って保持体100に取り付けられている。また光源200は、保持体100の上記一方向(第2方向Y)に対して保持体100の側方(第1方向Xの負方向)に位置する空間Sと、空間Sの前方(第3方向Zの負方向)と、空間Sの後方(第3方向Zの正方向)と、の少なくとも一部分に向けて光を照射する。光学センサ300は、保持体100に取り付けられている。また、光学センサ300の視野の少なくとも一部分は、空間Sと、空間Sの前方(第3方向Zの負方向)と、空間Sの後方(第3方向Zの正方向)と、の少なくとも一部分に向けられている。
 本実施形態によれば、保持体100の側方(第1方向Xの負方向)に位置する空間S、空間Sの前方(第3方向Zの負方向)又は空間Sの後方(第3方向Zの正方向)に位置する物体を光源200の光によって照射することができる。また、光源200の光によって照射された物体を光学センサ300によって検出することができる。したがって、特定の領域(空間S、空間Sの先方(第3方向Zの負方向)又は空間Sの後方(第3方向Zの正方向))内に存在し、又は特定の領域(空間S、空間Sの先方(第3方向Zの負方向)又は空間Sの後方(第3方向Zの正方向))を通過する物体を高感度に認識することができる。
 図1を用いて、物体認識装置10の詳細を説明する。
 保持体100は、光源200及び光学センサ300を保持する。保持体100は、一方向(第2方向Y)に延伸する延伸体である。保持体100は、上記一方向(第2方向Y)において伸縮可能であってもよい。この場合、保持体100の長さを、保持体100が取り付けられる部材にとって適当な長さに調整することができる。例えば、保持体100は、筒部材と、当該筒部材に対して移動可能に挿入された延伸部材と、を有していてもよい。この例においては、延伸部材を筒部材に対して移動させることで、上記一方向(第2方向Y)における保持体100の長さを調整することができる。しかしながら、上記一方向(第2方向Y)における保持体100の長さを調整するための構造はこの例に限定されない。また、保持体100は、上記一方向(第2方向Y)において伸縮可能でなくてもよい。
 光源200は、保持体100のうち空間Sに対向する面(第1方向Xの負方向側の面)側に位置している。光源200によって照射される光は、例えば、可視光、赤外線又は紫外線である。「光源200が一方向(第2方向Y)に沿って保持体100に取り付けられている」とは、例えば、光源200が、保持体100の上記一方向(第2方向Y)に沿って連続的に延伸する線状光源(例えば、棒状の蛍光灯)となっていることを意味する。或いは、「光源200が一方向(第2方向Y)に沿って保持体100に取り付けられている」とは、例えば、複数の光源200(例えば、複数の点状の光源200又は複数の線分状の光源200)が、保持体100の上記一方向(第2方向Y)に沿って互いに離間して並んでいることを意味する。光源200は、光学センサ300が取り付けられている領域を除いて、保持体100の上記一方向(第2方向Y)に実質的に全体(例えば、上記一方向(第2方向Y)における保持体100の、光学センサ300が取り付けられた領域を除く全長の90%以上100%以下)に亘って保持体100に設けられていてもよい。或いは、光源200は、保持体100のうち上記一方向(第2方向Y)の一部分(例えば、上記一方向(第2方向Y)における保持体100の全長の1/3以上)のみに設けられていてもよい。
 光学センサ300は、例えばカメラ等の撮像部である。物体認識装置10は、センサ本体(例えば、カメラのレンズ)を覆うカバー302を有している。仮に、カバー302が設けられていない場合、センサ本体が露出される。この場合、物体認識装置10に近づいた人が、光学センサ300(センサ本体)によって監視されている不安感を持つ可能性がある。これに対して、カバー302が設けられている場合、物体認識装置10に近づいた人がこのような不安感を持たないようにすることができる。しかしながら、物体認識装置10は、カバー302を有していなくてもよい。
 光学センサ300は、保持体100のうち空間Sに対向する面(第1方向Xの負方向側の面)側に位置している。光学センサ300は、光源200に対して保持体100の上記一方向(第2方向Y)に沿ってずれて位置している。具体的には、光学センサ300は、保持体100の一端(上端:第2方向Yの正方向側の端)に取り付けられている。しかしながら、光学センサ300は、保持体100の上記一方向(第2方向Y)において保持体100の一端(上端:第2方向Yの正方向側の端)からずれた位置(例えば、保持体100の上記一方向(第2方向Y)において保持体100の中心)に取り付けられていてもよい。
 光学センサ300の視野(例えば、光学センサ300の視野の中心線)は、光学センサ300が位置する位置から、空間S、空間Sの前方(第3方向Zの負方向)又は空間Sの後方(第3方向Zの正方向)に向けて、保持体100の上記一方向(第2方向Y)に斜交する方向(例えば、光学センサ300が位置する位置から第1方向Xの負方向と第2方向Yの負方向との間に向かう方向)に向けられている。空間Sの前方(第3方向Zの負方向)又は後方(第3方向Zの正方向)から見て、光学センサ300の視野は、光学センサ300が位置する位置から離れるほど広がっている。したがって、仮に、光学センサ300の視野(例えば、光学センサ300の視野の中心線)が、光学センサ300が位置する位置から、空間S、空間Sの前方(第3方向Zの負方向)又は空間Sの後方(第3方向Zの正方向)に向けて、保持体100の上記一方向(第2方向Y)に直交する方向(例えば、光学センサ300が位置する位置から第1方向Xの負方向に向かう方向)に向けられている場合、空間Sのうち、保持体100の上記一方向(第2方向Y)において光学センサ300に隣り合う領域は、光学センサ300の視野の死角になり得る。これに対して、本実施形態においては、空間Sのうち、保持体100の上記一方向(第2方向Y)において光学センサ300に隣り合う領域(例えば、空間Sのうち光学センサ300の下方(第2方向Yの負方向)に位置する領域)を光学センサ300の視野に含めることができる。しかしながら、光学センサ300の視野(例えば、光学センサ300の視野の中心線)は、光学センサ300が位置する位置から、空間S、空間Sの前方(第3方向Zの負方向)又は空間Sの後方(第3方向Zの正方向)に向けて、保持体100の上記一方向(第2方向Y)に直交する方向(例えば、第1方向Xの負方向)に向けられていてもよい。
 上述したように、本実施形態において、光学センサ300は、保持体100の一端(上端:第2方向Yの正方向側の端)に取り付けられている。したがって、空間Sの前方(第3方向Zの負方向)又は後方(第3方向Zの正方向)から見て、光学センサ300の視野の中心線が、光学センサ300が位置する位置から斜め下(第1方向Xの負方向と第2方向Yの負方向との間に向かう方向)に向けて延伸している場合、空間Sの前方(第3方向Zの負方向)又は後方(第3方向Zの正方向)から見て、光学センサ300の視野の全体が、空間Sのほぼ全域を含めるようにすることができる。
 光学センサ300の視野は、光学センサ300から空間Sに向かうにつれて(第1方向Xの正方向から第1方向Xの負方向に向かうにつれて)空間Sの前後方向(第3方向Z)に広がっていてもよい。この場合において光学センサ300の視野の中心線が空間Sに向けて延伸しているとき、光学センサ300の視野の空間Sの前側(第3方向Zの負方向側)の端は、空間Sの前方(第3方向Zの負方向)に達していてもよく、光学センサ300の視野の空間Sの後側(第3方向Zの正方向側)の端は、空間Sの後方(第3方向Zの正方向)に達していてもよい。また、光学センサ300の視野の中心線が空間Sの前方(第3方向Zの負方向)に向けて延伸しているとき、光学センサ300の視野の空間Sの後側(第3方向Zの正方向側)の端は、空間Sに達していてもよいし、又は空間Sの後方(第3方向Zの正方向)に達していてもよい。さらに、光学センサ300の視野の中心線が空間Sの後方(第3方向Zの正方向)に向けて延伸しているとき、光学センサ300の視野の空間Sの前側(第3方向Zの負方向側)の端は、空間Sに達していてもよいし、又は空間Sの前方(第3方向Zの負方向)に達していてもよい。
 光学センサ300は、保持体100に対して保持体100の上記一方向(第2方向Y)に移動可能に取り付けられていてもよい。この場合、物体認識装置10の使用状況に応じて、光学センサ300の位置を適切に調整することができる。例えば、光学センサ300は、保持体100の所定の面(例えば、光源200が設けられた面又は光源200が設けられた面と異なる面)に設けられたレールに沿ってスライド可能になっていてもよい。なお、光学センサ300は、保持体100に対して移動不可能に固定されていてもよい。
 本実施形態では、保持体100の一端(上端:第2方向Yの正方向側の端)及び他端(下端:第2方向Yの負方向側の端)のうち保持体100の一端(上端:第2方向Yの正方向側の端)のみに光学センサ300が取り付けられている。しかしながら、光学センサ300は、保持体100の一端(上端:第2方向Yの正方向側の端)及び他端(下端:第2方向Yの負方向側の端)の双方に取り付けられていてもよい。この場合、物体認識装置10によって物体の認識が可能な領域を、保持体100の一端(上端:第2方向Yの正方向側の端)に取り付けられた光学センサ300の視野と、保持体100の他端(下端:第2方向Yの負方向側の端)に取り付けられた光学センサ300の視野と、で相互に補完することができる。なお、保持体100の一端(上端:第2方向Yの正方向側の端)に取り付けられた光学センサ300に加えて取り付けられる光学センサ300は、保持体100の上記一方向(第2方向Y)において保持体100の他端(下端:第2方向Yの負方向側の端)からずれた位置に取り付けられていてもよい。また、保持体100に取り付けられる光学センサ300の数は、1つ又は2つでなくてもよく、3つ以上であってもよい。すなわち、保持体100には、少なくとも1つの光学センサ300が取り付けられるようにすることができる。
(実施形態2)
 図2は、実施形態2に係る物体認識装置10の斜視図である。実施形態2に係る物体認識装置10は、以下の点を除いて、実施形態1に係る物体認識装置10と同様である。
 図2を用いて、物体認識装置10の概要を説明する。
 物体認識装置10は、一対の保持体100を備えている。一対の保持体100は、空間Sを挟んで実質的に平行に対向している。「実質的に平行」とは、一対の保持体100が厳密に平行に配置されていることだけでなく、一対の保持体100の一方が一対の保持体100の他方に対して僅かな角度(例えば、2.5度以下)だけ傾いている(例えば、図2において、一対の保持体100の一方が第2方向Yに平行であり、一対の保持体100の他方が、第2方向Yから、第2方向Yに垂直な方向(例えば、第1方向X又は第3方向Z)に向けて僅かな角度だけ傾いている)ことも意味する。しかしながら、一対の保持体100は、実質的に平行に対向していなくてもよく、互いに斜めに傾いて対向していてもよい。また、一対の保持体100は、例えば、鉛直方向(第2方向Y)から水平方向(例えば、第1方向X又は第3方向Z)に向けて傾いていてもよいし、又は水平方向(例えば、第1方向X又は第3方向Z)に実質的に平行になっていてもよい。
 本実施形態では、一対の保持体100の各々の下端(第2方向Yの負方向側の端)は、空間Sの上下方向(第2方向Y)において揃っており、一対の保持体100の各々の上端(第2方向Yの負方向側の端)は、空間Sの上下方向(第2方向Y)において揃っている。しかしながら、一対の保持体100の各々の下端(第2方向Yの負方向側の端)は、空間Sの上下方向(第2方向Y)においてずれていてもよく、一対の保持体100の各々の上端(第2方向Yの負方向側の端)は、空間Sの上下方向(第2方向Y)においてずれていてもよい。
 本実施形態では、一対の保持体100の各々に光源200及び光学センサ300が取り付けられている。しかしながら、光源200は、例えば、一対の保持体100の一方(例えば、第1方向Xの正方向側の保持体100)のみに取り付けられていてもよく、光学センサ300は、例えば、一対の保持体100の他方(例えば、第1方向Xの負方向側の保持体100)のみに取り付けられていてもよい。すなわち、光源200は、一対の保持体100の少なくとも一方に取り付けられるようにし、光学センサ300は、一対の保持体100の少なくとも他方に取り付けられるようにすることができる。
 本実施形態では、一対の保持体100の一方(第1方向Xの正方向側の保持体100)と、当該一方の保持体100に取り付けられた光源200及び光学センサ300と、を含む要素と、一対の保持体100の他方(第1方向Xの負方向側の保持体100)と、当該他方の保持体100に取り付けられた光源200及び光学センサ300と、を含む要素とは、同一の構成(例えば、保持体100の形状、光源200の光の波長、光学センサ300によって検出される波長)を有しており、空間Sの前方(第3方向Zの負方向)又は後方(第3方向Zの正方向)から見て空間Sの中心に関して回転対称に配置されている。この場合、これら2つの要素の一方と他方とで構成を変える必要がなく、これら2つの要素を適当に配置することで物体認識装置10を形成することができる。このため、これら2つの要素が互いに異なる構成を有する場合と比較して、物体認識装置10の形成を簡易にすることができる。しかしながら、これら2つの要素は、互いに異なる構成を含んでいてもよい。
 物体認識装置10の保持体100の数は、本実施形態に係る数(2つ)に限定されない。物体認識装置10は、3つ以上の保持体100を備えていてもよい。すなわち、物体認識装置10は、複数の保持体100を備えるようにすることができる。
 図2を用いて、物体認識装置10の詳細を説明する。
 一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた光源200と、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光源200とは、空間Sを挟んで対向している。
 一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた光学センサ300は、当該一方の保持体100の上端(第2方向Yの正方向側の端)に取り付けられている。これに対して、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光学センサ300は、当該他方の保持体100の下端(第2方向Yの負方向側の端)に取り付けられている。なお、一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた光学センサ300は、当該一方の保持体100の上記一方向(第2方向Y)において当該一方の保持体100の上端(第2方向Yの正方向側の端)からずれた位置に取り付けられていてもよい。また、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光学センサ300は、当該他方の保持体100の上記一方向(第2方向Y)において当該他方の保持体100の下端(第2方向Yの負方向側の端)からずれた位置に取り付けられていてもよい。
 一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた光学センサ300と、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光学センサ300とは、一対の保持体100の一方(第1方向Xの正方向側の保持体100)又は他方(第1方向Xの負方向側の保持体100)の上記一方向(第2方向Y)に斜交する方向に対向している。この場合、物体認識装置10によって物体の認識が可能な領域を、一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた光学センサ300の視野と、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光学センサ300の視野と、で相互に補完することができる。
 一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた光学センサ300の視野と、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光学センサ300の視野とは、空間S、空間Sの前方(第3方向Zの負方向)及び空間Sの後方(第3方向Zの正方向)のうちの同一領域に向けられるようにしてもよい。例えば、一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた光学センサ300の視野が空間Sに向けられているとき、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光学センサ300の視野も空間Sに向けられる。この場合、これら2つの光学センサ300の視野が向けられている領域においては、1つのみの光学センサ300の視野がこの領域に向けられている場合と比較して、これら2つの光学センサ300の視野の死角をより確実に低減することができる。
 一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた光学センサ300の視野と、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光学センサ300の視野とは、空間S、空間Sの前方(第3方向Zの負方向)及び空間Sの後方(第3方向Zの正方向)のうちの異なる領域に向けられるようにしてもよい。例えば、一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた光学センサ300の視野が空間Sの前方(第3方向Zの負方向)に向けられているとき、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光学センサ300の視野は空間Sの後方(第3方向Zの正方向)に向けられる。この場合、物体認識装置10によって物体の認識が可能な領域を、空間Sの前方(第3方向Zの負方向)から後方(第3方向Zの正方向)にかけて広げることができる。この場合、一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた光学センサ300の視野の一部分と、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光学センサ300の視野の一部分とは、交わってもよいし、又は交わらなくてもよい。
 一対の保持体100の各々に取り付けられた光学センサ300の配置は、本実施形態に係る配置に限定されない。例えば、一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた光学センサ300と、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光学センサ300とは、一対の保持体100の一方(第1方向Xの正方向側の保持体100)又は他方(第1方向Xの負方向側の保持体100)の上記一方向(第2方向Y)に直交する方向(例えば、第1方向X)に対向していてもよい。
 次に、光源200によって照射される光の波長と、光学センサ300によって検出される光の波長と、の関係について説明する。光源200によって照射される光の波長と、光学センサ300によって検出される光の波長とは、物体認識装置10の用途に応じて、適宜選択される。例えば、これらの波長は以下のようになる。
 一例において、光源200によって照射される光は白色光であり、光学センサ300によって検出される光はRGB(Red Blue Green)光である。例えば、光源200は白色照明を有しており、光学センサ300はRGBカメラを有している。この例においては、光学センサ300によって得られるカラー画像によって、物体認識装置10は、人、物品等の物体を認識することができる。
 他の一例において、光源200によって照射される光は赤外光であり、光学センサ300によって検出される光は赤外光である。例えば、光源200は赤外照明を有しており、光学センサ300は赤外カメラを有している。この例においては、物体認識装置10の近くにいる人に眩しさを与えることなく、光源200から照射される光(赤外光)の強度を高くすることができる。
 さらに他の一例において、光源200によって照射される光は白色光及び赤外光の双方であり、光学センサ300によって検出される光はRGB光及び赤外光の双方である。例えば、光源200は白色照明及び赤外照明の双方を有しており、光学センサ300はRGBカメラ及び赤外カメラの双方を有している。この例においては、赤外カメラによって人、物人等の物体の動作を認識することができ、RGBカメラによって人、物人等の物体の種類を認識することができる。
 光源200は、光(例えば、白色光及び赤外光の少なくとも一方)を連続的に照射する。或いは、光源200は、光(例えば、白色光及び赤外光の少なくとも一方)を間欠的に照射してもよい。光源200が光を間欠的に照射する場合、光源200は、例えば、ストロボ照明を有していてもよい。この場合、光が連続的に照射される場合と比較して、人、物品等の物体のモーションブラーを抑えることができる。
 図3は、図2において視野が鉛直方向(第2方向Y)の下方(第2方向Yの負方向)から上方(第2方向Yの正方向)に向けられている光学センサ300(図2において第1方向Xの負方向側の光学センサ300)の第1例を説明するための図である。
 視野が鉛直方向(第2方向Y)の下方(第2方向Yの負方向)から上方(第2方向Yの正方向)に向けられている光学センサ300(図2において第1方向Xの負方向側の光学センサ300)は、ハーフミラー312によって覆われていてもよい。この場合、光学センサ300側(物体認識装置10に近づいた人が位置する側に対して暗い側)からは物体認識装置10に近づいた人(光学センサ300が位置する側に対して明るい側)がハーフミラー312を介してよく見える一方で、物体認識装置10に近づいた人側(光学センサ300が位置する側に対して明るい側)からは光学センサ300(物体認識装置10に近づいた人が位置する側に対して暗い側)はハーフミラー312によってほとんど見えなくなる。したがって、物体認識装置10に近づいた人が、光学センサ300によって下方(第2方向Yの負方向)から監視されているという不安感を持たないようにすることができる。
 図2において視野が鉛直方向(第2方向Y)の上方(第2方向Yの正方向)から下方(第2方向Yの負方向)に向けられている光学センサ300(図2において第1方向Xの正方向側の光学センサ300)は、ハーフミラーによって覆われていなくてもよいし、又は覆われていてもよい。例えば、視野が鉛直方向(第2方向Y)の下方(第2方向Yの負方向)から上方(第2方向Yの正方向)に向けられている光学センサ300(図2において第1方向Xの負方向側の光学センサ300)は、ハーフミラー312によって覆われるようにする一方で、視野が鉛直方向(第2方向Y)の上方(第2方向Yの正方向)から下方(第2方向Yの負方向)に向けられている光学センサ300(図2において第1方向Xの正方向側の光学センサ300)は、ハーフミラーによって覆われていないようにしてもよい。この場合、視野が鉛直方向(第2方向Y)の上方(第2方向Yの正方向)から下方(第2方向Yの負方向)に向けられている光学センサ300(図2において第1方向Xの正方向側の光学センサ300)によって検出される光量を、ハーフミラーが設けられている場合と比較して多くすることができる。
 図4は、図2において視野が鉛直方向(第2方向Y)の下方(第2方向Yの負方向)から上方(第2方向Yの正方向)に向けられている光学センサ300(図2において第1方向Xの負方向側の光学センサ300)の第2例を説明するための図である。
 視野が鉛直方向(第2方向Y)の下方(第2方向Yの負方向)から上方(第2方向Yの正方向)に向けられている光学センサ300(カバー302)(図2において第1方向Xの負方向側の光学センサ300(カバー302))の前側部分(第3方向Zの負方向側の部分)は、遮蔽体314によって覆われていてもよい。遮蔽体314が設けられている場合、空間Sの前方(第3方向Zの負方向)に位置する人からは光学センサ300(カバー302)が遮蔽体314によって隠れる。このため、空間Sの前方(第3方向Zの負方向)に位置する人が、光学センサ300によって下方(第2方向Yの負方向)から監視されているという不安感を持たないようにすることができる。また、遮蔽体314が設けられている場合、空間Sの前方(第3方向Zの負方向)に位置する人等の物体が光学センサ300によって検出されないようにすることができる。このため、空間Sの前方(第3方向Zの負方向)に位置する人のプライバシーを保護することができる。
 視野が鉛直方向(第2方向Y)の上方(第2方向Yの正方向)から上方(第2方向Yの負方向)に向けられている光学センサ300(カバー302)(図2において第1方向Xの正方向側の光学センサ300(カバー302))の前側部分(第3方向Zの負方向側の部分)は、遮蔽体によって覆われていてもよいし、又は覆われていなくてもよい。
 図5は、図2の第1の変形例を示す図である。
 物体認識装置10は、2つのスペーサ110をさらに備えている。各スペーサ110は、一対の保持体100の各々に接続されている。2つのスペーサ110の一方(第2方向Yの正方向側のスペーサ110)は、一対の保持体100の各々の上端側(第2方向Yの正方向側)に接続されている。これに対して、2つのスペーサ110の他方(第2方向Yの負方向側のスペーサ110)は、一対の保持体100の各々の下端側(第2方向Yの負方向側)に接続されている。なお、物体認識装置10は、1つのみのスペーサ110を備えていてもよいし、3つ以上のスペーサ110を備えていてもよい。すなわち、物体認識装置10は、少なくとも1つ又は複数のスペーサ110を備えるようにすることができる。
 本変形例においては、一対の保持体100の間の間隔を、各スペーサ110の長さによって適当な長さに調整することができる。例えば、各スペーサ110は、一対の保持体100の間で空間Sの左右方向(第1方向X)に沿って伸縮可能になっている。この場合、各スペーサ110は、筒部材と、当該筒部材に対して移動可能に挿入された延伸部材と、を有していてもよい。この例においては、延伸部材を筒部材に対して移動させることで、各スペーサ110の延伸方向(第1方向X)における長さを調整することができる。しかしながら、各スペーサ110の延伸方向(第1方向X)における長さを調整するための構造はこの例に限定されない。また、各スペーサ110は、一対の保持体100の間で伸縮可能でなくてもよい。この場合であっても、長さが異なる複数のスペーサ110を予め用意し、これらの複数のスペーサ110から適当な長さを有するスペーサ110を選択することで、一対の保持体100の間の間隔を適当な長さに調整することができる。
 各スペーサ110は、透明であってもよい。この場合、空間Sの前方(第3方向Zの負方向)から見て、各スペーサ110の後方(第3方向Zの正方向)に存在する物体を、各スペーサ110を通しても見えるようにすることができる。しかしながら、各スペーサ110は、透明でなくてもよい。
 図6は、図2の第2の変形例を示す図である。
 物体認識装置10は、伸縮可能な一対のガイド部材120を備えている。各ガイド部材120は、例えば、紐型メジャー又は折り畳み型メジャーである。図6では、伸ばされた各ガイド部材120が図示されている。縮められた各ガイド部材120(例えば、巻き取られた紐型メジャー又は折り畳まれた折り畳み型メジャー)は、各保持体100の所定位置(例えば、光学センサ300の近傍)に予め設けられている。縮められた各ガイド部材120を伸ばして、伸ばされた各ガイド部材120を相手方の保持体100(例えば、保持体100のうち光学センサ300が設けられた端部と反対側に位置する端部に予め設けられたフック等の係合部材)に取り付ける。これによって、図6に示すように、一対のガイド部材120は、一対の保持体100の間で交差する。具体的には、一対のガイド部材120の一方(第1方向Xの正方向と第2方向Yの正方向との間の方向に延伸しているガイド部材120)の一端及び他端は、それぞれ、一対の保持体100の一方(第1方向Xの正方向側の保持体100)の上端(第2方向Yの正方向側の端)及び一対の保持体100の他方(第1方向Xの負方向側の保持体100)の下端(第2方向Yの負方向側の端)に固定されている。また、一対のガイド部材120の他方(第1方向Xの負方向と第2方向Yの正方向との間の方向に延伸しているガイド部材120)の一端及び他端は、それぞれ、一対の保持体100の一方(第1方向Xの正方向側の保持体100)の下端(第2方向Yの負方向側の端)及び一対の保持体100の他方(第1方向Xの負方向側の保持体100)の上端(第2方向Yの正方向側の端)に固定されている。
 一対のガイド部材120は、図6に示すように一対のガイド部材120が一対の保持体100の間で交差し、かつ一対の保持体100の各々に取り付けられた光学センサ300が適切な位置に配置されている(例えば、空間Sの前方(第3方向Zの負方向)又は後方(第3方向Zの正方向)から見て各光学センサ300を結ぶ直線が空間Sの中心を通過する)とき、当該一対のガイド部材120の一方及び他方の各々の所定部分(例えば、中心)において交差するように設けられている。各ガイド部材120の当該所定部分(例えば、中心)には予め目印が設けられていてもよい。この場合、一対のガイド部材120を用いて一対の保持体100(一対の保持体100の各々に取り付けられた光学センサ300)の位置合わせを適切に行うことができる。
 図7は、図2の第3の変形例を示す図である。
 物体認識装置10は、人感センサ402をさらに備えている。人感センサ402は、物体認識装置10の前方(第3方向Zの負方向)に位置する人を検出する。人感センサ402は、人を検出可能な各種センサ、例えば、赤外線センサ、可視光センサ等の光学センサや、超音波センサ、可聴音波センサ等の音センサ(例えば、マイク)である。人感センサ402は、各保持体100の前面(第3方向Zの負方向側の面)側に設けられている。この場合、人感センサ402が各保持体100の前面と異なる位置に設けられている場合と比較して、物体認識装置10の前方(第3方向Zの負方向)に位置する人を人感センサ402が検出しやすくなっている。しかしながら、物体認識装置10の前方(第3方向Zの負方向)に位置する人を人感センサ402が検出可能な限り、人感センサ402は、各保持体100の前面(第3方向Zの負方向側の面)側と異なる位置に設けられていてもよい。
 各保持体100に取り付けられた光源200及び光学センサ300の少なくとも一方の動作状態は、人感センサ402の検出結果に応じて切り替え可能になっている。例えば、光源200から照射される光の量は、物体認識装置10の前方(第3方向Zの負方向)に位置する人を人感センサ402が検出する場合において、物体認識装置10の前方(第3方向Zの負方向)に位置する人を人感センサ402が検出しない場合においてよりも、高くしてもよい。例えば、物体認識装置10の前方(第3方向Zの負方向)に位置する人を人感センサ402が検出する場合、光源200は光を照射してもよくする一方で、物体認識装置10の前方(第3方向Zの負方向)に位置する人を人感センサ402が検出しない場合、光源200は光を照射しなくてもよい。また、光学センサ300は、物体認識装置10の前方(第3方向Zの負方向)に位置する人を人感センサ402が検出しない場合において停止させてもよく、物体認識装置10の前方(第3方向Zの負方向)に位置する人を人感センサ402が検出する場合において起動させてもよい。この場合、光源200及び光学センサ300を常に動作させる必要がなくなる。したがって、光源200及び光学センサ300を常に動作させる場合と比較して、物体認識装置10の消費電力を低くすることができる。
 本変形例では、人感センサ402は、一対の保持体100の各々に取り付けられている。しかしながら、人感センサ402は、一対の保持体100の一方のみに取り付けられていてもよい。すなわち、人感センサ402は、一対の保持体100の少なくとも一方に取り付けられるようにすることができる。また、人感センサ402が取り付けられる位置は、図7に示される位置に限定されない。
 図8は、図2の第4の変形例を示す図である。
 物体認識装置10は、表示部404をさらに備えている。表示部404は、物体認識装置10の前方(第3方向Zの負方向)に向けられている。表示部404は、各種ディスプレイ、例えば、液晶ディスプレイや有機エレクトロルミネッセンス(EL)ディスプレイである。また、表示部404は、タッチスクリーンであってもよい。表示部404がタッチスクリーンであるとき、物体認識装置10のユーザは、表示部404を用いて、物体認識装置10を操作するための指示を物体認識装置10に与えることができる。
 表示部404によって表示される画像の向きは、表示部404が取り付けられた保持体100の姿勢に応じて切り替え可能になっている。表示部404によって表示される画像の向きとは、例えば、表示部404によって表示される画像の所定の基準方向(例えば、表示部404によって表示される画像の上方向又は下方向)が保持体100の所定位置(例えば、保持体100のうち光学センサ300が設けられた一端)に対してどの方向に向けられているかを意味する。保持体100の姿勢とは、例えば、保持体100の所定位置(例えば、保持体100のうち光学センサ300が設けられた一端)が、鉛直方向(第2方向Y)の上方(第2方向Yの正方向)若しくは下方(第2方向Yの負方向)に向けられているのか、水平方向(第1方向X)に向けられているのか、又は鉛直方向(第2方向Y)若しくは水平方向(第1方向X)から斜め方向に向けられているかを意味する。保持体100の姿勢は、例えば、保持体100の姿勢を検出するセンサ(例えば、保持体100に取り付けられたジャイロセンサ)によって検出される。
 仮に、例えば、表示部404によって表示される画像の向きが保持体100の姿勢に応じて切り替わらず、表示部404によって表示される画像の上方向が、保持体100のうち光学センサ300が設けられた一端に向けられている場合、空間Sの前方(第3方向Zの負方向)から見て左側(第1方向Xの正方向側)の保持体100に取り付けられた表示部404によって表示される画像は適切な向きで表示されるものの、空間Sの前方(第3方向Zの負方向)から見て右側(第1方向Xの負方向側)の保持体100に取り付けられた表示部404によって表示される画像は上下逆さまに表示される。これに対して、本実施形態においては、空間Sの前方(第3方向Zの負方向)から見て右側(第1方向Xの負方向側)の保持体100に取り付けられた表示部404によって表示される画像の向きは、この保持体100の姿勢に応じて切り替わり、上下逆さまに表示されないようになる。
 本変形例では、表示部404は、一対の保持体100の各々に取り付けられている。しかしながら、表示部404は、一対の保持体100の一方のみに取り付けられていてもよい。すなわち、表示部404は、一対の保持体100の少なくとも一方に取り付けられるようにすることができる。また、表示部404が取り付けられる位置は、図8に示される位置に限定されない。
 図9は、図2の第5の変形例を示す図である。
 物体認識装置10は、音センサ406をさらに備えている。音センサ406は、例えばマイクである。物体認識装置10は、音センサ406の検出結果を用いて、例えば以下の処理を行うことができる。
 例えば、無人店舗においては、音センサ406は、商品等の物品の決済の際に生じる音を検出してもよい。すなわち、物体認識装置10は、音センサ406が商品等の物品の決済の際に生じる音を検出したときは、商品等の物品の決済が完了したことを判断することができ、音センサ406が商品等の物品の決済の際に生じる音を検出しないときは、商品等の物品の決済が完了していないことを判断することができる。
 また、音センサ406は、商品等の物品に関する異常音、店内の異常音等、各種の異常音を検出してもよい。商品等の物品に関する異常音は、例えば、商品等の物品が破壊する際に生じる音を含む。これらの異常音は予め物体認識装置10又は物体認識装置10に通信又は接続可能な外部装置(例えば、サーバ)に予め記憶させることができる。物体認識装置10は、記憶された当該音を参照して、商品等の物品に関する異常音を判断することができる。また、商品等の物品に関する異常音は、商品等の物品とともに使用される什器が破壊する際に生じる音をさらに含んでもよい。また、店内の異常音は、例えば、物体認識装置10の近傍での悲鳴、喧嘩の音、怒声、防犯ブザー等を含む。
 さらに、音センサ406は、客の入店音を検出してもよい。
 さらに、音センサ406は、物体認識装置10を操作するための指示の音(例えば、音声)を検出してもよい。この場合、例えば、表示部404(タッチスクリーン)を用いることなく、音声等の音によって物体認識装置10の各種処理(例えば、商品等の物品の決済)を行うことができる。
 本変形例では、音センサ406は、一対の保持体100の各々に取り付けられている。しかしながら、音センサ406は、一対の保持体100の一方のみに取り付けられていてもよい。すなわち、音センサ406は、一対の保持体100の少なくとも一方に取り付けられるようにすることができる。また、音センサ406が取り付けられる位置は、図9に示される位置に限定されない。また、一対の保持体100の双方に音センサ406が取り付けられている場合、2つの音センサ406は、ステレオ音を検出するように配置されていてもよい。
 図10は、図2の第6の変形例を示す図である。
 物体認識装置10は、音源408をさらに備えている。音源408は、例えばスピーカである。物体認識装置10は、音源408を用いて、例えば以下の処理を行うことができる。
 例えば、音源408は、ユーザ(例えば、店の客)による物体認識装置10の使用を補助するための音(例えば、音声)を出力する。例えば、無人店舗においては、音源408は、前述した音センサ406が商品等の物品の決済の際に生じる音を検出しないときは、決済を促す音(例えば、音声)を出力する。
 また、音源408は、例えば、前述した音センサ406が、商品等の物品に関する異常音、店内の異常音等の各種の異常音を検出したとき、異常音に応じて、各種の音(例えば、防犯ブザー音)を出力してもよい。
 また、音源408は、物体認識装置10の各種検出結果(例えば、光学センサ300の検出結果又は後述する深度センサ410の検出結果)に応じて、商品等の物品の属性情報(例えば、商品の賞味期限)を示す音(例えば、音声)を出力してもよい。
 本変形例では、音源408は、一対の保持体100の各々に取り付けられている。しかしながら、音源408は、一対の保持体100の一方のみに取り付けられていてもよい。すなわち、音源408は、一対の保持体100の少なくとも一方に取り付けられるようにすることができる。また、音源408が取り付けられる位置は、図10に示される位置に限定されない。また、一対の保持体100の双方に音源408が取り付けられている場合、2つの音源408は、ステレオ音を形成するように配置されていてもよい。
 図11は、図2の第7の変形例を示す図である。
 物体認識装置10は、深度センサ410を備えている。深度センサ410は、例えば、デプスカメラである。本実施形態では、複数の深度センサ410が各保持体100に取り付けられており、各保持体100に取り付けられた複数の深度センサ410は、各保持体100の上記一方向(第2方向Y)に並んでいる。各深度センサ410の検出範囲は、空間Sの後方(第3方向Zの正方向)に向けられている。この場合、空間Sの後方(第3方向Zの正方向)に位置する物体の、空間Sの左右方向(第1方向X)における位置を、深度センサ410が用いられない場合と比較して正確に特定することが可能になる。
 後述する実施形態3(図17)のように、空間Sの後方(第3方向Zの正方向)に収容部22が配置される場合、各保持体100に取り付けられた各深度センサ410は、収容部22のうち商品等の物品が収容される各段に対して設けることができる。この場合、収容部22の各段における商品等の物品の左右方向(第1方向X)における位置を、深度センサ410が用いられない場合と比較して正確に特定することが可能になる。
 なお、深度センサ410は、一対の保持体100の一方のみに取り付けられていてもよい。すなわち、深度センサ410は、一対の保持体100の少なくとも一方に取り付けられるようにすることができる。また、深度センサ410が取り付けられる位置は、図11に示される位置に限定されない。また、各保持体100に取り付けられる深度センサ410の数は1つのみであってもよい。すなわち、少なくとも1つの深度センサ410が一対の保持体100の少なくとも一方に取り付けられるようにすることができる。
 図12は、図2の第8の変形例を示す図である。
 各保持体100の上部(第2方向Yの正方向側の部分)及び下部(第2方向Yの負方向側の部分)の各々には、各保持体100に取り付けられた要素(例えば、光源200又は光学センサ300)から発生する熱を排気するための孔102が形成されている。各保持体100の上部(第2方向Yの正方向側の部分)及び下部(第2方向Yの負方向側の部分)の各々に形成された孔102によって、対流を利用して熱を排気することができる。また、各保持体100の上部(第2方向Yの正方向側の部分)に形成された孔102の面積は、各保持体100の下部(第2方向Yの負方向側の部分)に形成された孔102の面積より大きくなっている。この場合、各保持体100の上部(第2方向Yの正方向側の部分)に形成された孔102の面積が、各保持体100の下部(第2方向Yの負方向側の部分)に形成された孔102の面積以下の場合と比較して、各保持体100の上部(第2方向Yの正方向側の部分)に形成された孔102から排気される熱量を多くすることができる。
 図13は、図2の第9の変形例を示す図である。
 各保持体100の上部(第2方向Yの正方向側の部分)(各保持体100の内側の上部)には、放熱部材104が設けられている。放熱部材104は、例えば、金属板又は放熱シートである。各保持体100に取り付けられた要素(例えば、光源200又は光学センサ300)から発生する熱を放熱部材104によって各保持体100の外部に逃がすことができる。各保持体100に取り付けられた要素(例えば、光源200又は光学センサ300)から発生する熱は、鉛直方向の上方(第2方向Yの正方向)に向かいやすいことを考慮すると、放熱部材104は、各保持体100の下部(第2方向Yの負方向側の部分)より、各保持体100の上部(第2方向Yの正方向側の部分)に設けられていることが好ましい。しかしながら、放熱部材104が取り付けられる位置は、本変形例に係る位置に限定されない。
 図14は、図2の第10の変形例を示す図である。
 物体認識装置10は、通信部502をさらに備えている。通信部502は、例えば、アンテナである。物体認識装置10は、通信部502を介して、物体認識装置10の外部装置(例えば、サーバ)と通信することができる。通信部502は、一対の保持体100の各々に取り付けられている。また、各保持体100に取り付けられた通信部502は、各保持体100の上記一方向(第2方向Y)における中心より上方(第2方向Yの正方向)に位置している。この場合、各保持体100に取り付けられた通信部502が、各保持体100の上記一方向(第2方向Y)における中心より下方(第2方向Yの負方向)に位置している場合と比較して、鉛直方向(第2方向Y)における通信部502の位置を高くすることができ、通信部502が物体認識装置10の外部装置(例えば、サーバ)と通信しやすくなる。しかしながら、各保持体100に取り付けられた通信部502は、各保持体100の上記一方向(第2方向Y)における中心に位置していてもよいし、又は各保持体100の上記一方向(第2方向Y)における中心より下方(第2方向Yの負方向)に位置していてもよい。
 図15は、図2の第11の変形例を示す図である。
 物体認識装置10は、電源504をさらに備えている。電源504は、各保持体100に取り付けられた要素(例えば、光源200又は光学センサ300)に電力を供給する。電源504は、一対の保持体100の各々に取り付けられている。また、各保持体100に取り付けられた電源504は、各保持体100の上記一方向(第2方向Y)における中心より下方(第2方向Yの負方向)に位置している。この場合において、電源504に接続される配線が物体認識装置10の設置面の近くに設けられているとき、各保持体100に取り付けられた電源504が、各保持体100の上記一方向(第2方向Y)における中心より上方(第2方向Yの負方向)に位置している場合と比較して、電源504と、電源504に接続される配線と、の間の距離を短くすることができる。しかしながら、各保持体100に取り付けられた電源504は、各保持体100の上記一方向(第2方向Y)における中心に位置していてもよいし、又は各保持体100の上記一方向(第2方向Y)における中心より上方(第2方向Yの正方向)に位置していてもよい。
 図15では、電源504について説明したが、物体認識装置10の外部のコネクタに接続する通信ケーブルについても、電源504で説明した上記事項と同様のことがいえる。
 図16は、図2の第12の変形例を示す図である。
 物体認識装置10は、通信装置506a及び通信配線506bを備えている。通信装置506aは、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられている。また、通信装置506aは、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光学センサ300に電気的に接続されている。通信配線506bは、一対の保持体100の一方(第1方向Xの正方向側の保持体100)と、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた通信装置506aと、に接続されている。また、通信配線506bは、一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた光学センサ300に電気的に接続されている。通信装置506aは、物体認識装置10の外部装置(例えば、コンピュータ)と通信する。この例では、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光学センサ300の検出結果は、通信装置506aを介して、物体認識装置10の外部装置(例えば、コンピュータ)に送信することができ、一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた光学センサ300の検出結果は、通信配線506b及び通信装置506aを介して、物体認識装置10の外部装置(例えば、コンピュータ)に送信することができる。
(実施形態3)
 図17は、実施形態3に係る収容装置20の斜視図である。
 収容装置20は、収容部22及び物体認識装置10を備えている。収容部22には、物品が収容される。具体的には、収容部22は、例えば、小売店等の店内において商品等の物品が収容される棚である。本実施形態に係る物体認識装置10は、実施形態2に係る物体認識装置10と同様である。すなわち、物体認識装置10は、一対の保持体100を有している。しかしながら、物体認識装置10は、実施形態1に係る物体認識装置10と同様にして、単一の保持体100のみを有していてもよい。収容部22は、一対の保持体100の間の空間Sの後方(第3方向Zの正方向)に位置している。収容部22は、保持体100を有している。本実施形態では、保持体100は、収容部22の枠のうち収容装置20の上下方向(第2方向Y)に延伸する部分に取り付けられている。つまり、物体認識装置10(保持体100)は、予め用意された収容部22に取り付けられている。しかしながら、保持体100は、収容部22の一部分(例えば、収容部22の枠のうち収容装置20の上下方向(第2方向Y)に延伸する部分)自体であってもよい。すなわち、「収容部22が保持体100を有する」とは、収容部22に保持体100が取り付けられていることを意味してもよいし、又は保持体100が収容部22の一部分自体であることを意味してもよい。
 例えば、収容装置20が小売店等の店内において用いられる場合、物体認識装置10は、様々な物体、例えば、物体認識装置10の近くにいる人や、物体認識装置10の前方(第3方向Zの負方向)にいる人が、収容部22に収容された商品等の物品に向けて空間Sを経由して伸ばした手、空間Sを経由して収容部22に収容される商品等の物品、空間Sを経由して収容部22から取り出される商品等の物品等を認識する。このようにして、収容装置20(物体認識装置10)は、収容部22に対して特定の領域(例えば、空間S、空間Sの前方(第3方向Zの正方向)又は空間Sの後方(第3方向Zの負方向))内に存在し、又は収容部22に対して特定の領域(例えば、空間S、空間Sの前方(第3方向Zの正方向)又は空間Sの後方(第3方向Zの負方向))を通過する物体(例えば、商品等の物品又は人)を高感度に認識することができる
 図18は、図17に示した光源200及び光学センサ300の関係の第1例を説明するための図である。
 一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた光源200は、可視光光源200a及び赤外光光源200bを含んでいる。一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光源200も、可視光光源200a及び赤外光光源200bを含んでいる。一対の保持体100の各々に取り付けられた光学センサ300は、RGB光及び赤外光の双方を検出可能になっている。
 図18において、可視光光源200aの位置を示す点を1つの頂点として有する白色三角形は、可視光光源200aによる可視光の照射範囲を示している。しかしながら、実際の物体認識装置10において、可視光光源200aによる可視光の照射範囲は、図18で図示された範囲よりも保持体100からさらに離れた領域に達していてもよい。図18において、赤外光光源200bの位置を示す点を1つの頂点として有する線ハッチング付き三角形は、赤外光光源200bによる赤外光の照射範囲を示している。しかしながら、実際の物体認識装置10において、赤外光光源200bによる赤外光の照射範囲は、図18で図示された範囲よりも保持体100からさらに離れた領域に達していてもよい。図18において、光学センサ300の位置を示す点を1つの頂点として有する点ハッチング付き三角形は、光学センサ300の視野を示している。しかしながら、実際の物体認識装置10において、光学センサ300の視野は、図18で図示された範囲よりも保持体100からさらに離れた領域に達していてもよい。以下で特に説明する事項を除いて、後述する図19及び図20においても同様である。
 一対の保持体100の各々に取り付けられた赤外光光源200bによる赤外光の照射範囲は、空間Sの前方(第3方向Zの負方向)(人Uが位置する側)に向けられているのに対し、一対の保持体100の各々に取り付けられた可視光光源200aによる可視光の照射範囲は、空間Sの後方(第3方向Zの正方向)(収容部22が位置する側)に向けられている。したがって、空間Sの前方(第3方向Zの負方向)に位置する人Uに可視光があまり照射されないようにすることで、空間Sの前方(第3方向Zの負方向)に位置する人Uが可視光の眩しさを感じないようにすることができる。空間Sの前方(第3方向Zの負方向)に位置する人Uは、可視光よりも、主に赤外光によって検出することが可能になっている。
 図19は、図17に示した光源200及び光学センサ300の関係の第2例を説明するための図である。なお、図19において、2つの光学センサ300のうち第1方向Xの正方向側の光学センサ300の位置を示す点を1つの頂点として有する点ハッチング付き三角形は、2つの光学センサ300のうち第1方向Xの正方向側の光学センサ300のRGB光についての視野を示している。また、図19において、2つの光学センサ300のうち第1方向Xの負方向側の光学センサ300の位置を示す点を1つの頂点として有する線ハッチング付き三角形は、2つの光学センサ300のうち第1方向Xの負方向側の光学センサ300の赤外光についての視野を示している。これらの視野は、図19で図示された範囲よりも保持体100からさらに離れた領域に達していてもよい。
 一対の保持体100の一方(第1方向Xの正方向側の保持体100)には赤外光を発する光源200(赤外光光源200b)が取り付けられているのに対して、一対の保持体100の他方(第1方向Xの負方向側の保持体100)には、赤外光を発する光源200が取り付けられていない。一方、一対の保持体100の他方(第1方向Xの負方向側の保持体100)には、赤外光を検出する光学センサ300が取り付けられている。この場合、一対の保持体100の一方(第1方向Xの正方向側の保持体100)に取り付けられた赤外光光源200bから発せられた赤外光が人U、物品等の物体によって遮られたことを、一対の保持体100の他方(第1方向Xの負方向側の保持体100)に取り付けられた光学センサ300によって検出することができる。
 図20は、図17に示した光源200及び光学センサ300の関係の第3例を説明するための図である。なお、図20においての空間Sの上下方向(第2方向Y)における一対の保持体100の各々の長さは、図17においての空間Sの上下方向(第2方向Y)における一対の保持体100の各々の長さより長くなっている。図20においては、一対の保持体100の各々の下端(第2方向Yの負方向側の端)は、空間Sの前方(第3方向Zの負方向)に位置する人Uのおおよそ膝下の高さ(収容装置20が設置される面から上方(第2方向Yの正方向)に向けて例えば50cm以下の高さ)まで達している。
 一対の保持体100の各々において、可視光光源200aは、赤外光光源200bより上方(第2方向Yの正方向)に位置している。より具体的には、一対の保持体100の各々において、可視光光源200aは、各保持体100の延伸方向(第2方向Y)における中心から上方(第2方向Yの正方向)にずれて位置している一方で、赤外光光源200bは、各保持体100の延伸方向(第2方向Y)における中心から下方(第2方向Yの負方向)にずれて位置している。また、一対の保持体100の各々に取り付けられた光学センサ300は、RGB光及び赤外光の双方を検出可能になっている。
 空間Sの前方(第3方向Zの負方向)に位置する人Uの上方(第2方向Yの正方向)から可視光が照射されて、空間Sの前方(第3方向Zの負方向)に位置する人Uの下方(第2方向Yの負方向)から赤外光が照射される。この場合、例えば、空間Sの前方(第3方向Zの負方向)に位置する人Uの下方(第2方向Yの負方向)から可視光が照射される場合と比較して、空間Sの前方(第3方向Zの負方向)に位置する人Uが可視光の眩しさを感じないようにすることができる。
 以上、図面を参照して本発明の実施形態及び変形例について述べたが、これらは本発明の例示であり、上記以外の様々な構成を採用することもできる。
 上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限定されない。
1. 一方向に延伸する保持体と、
 前記一方向に沿って前記保持体に取り付けられ、前記保持体の前記一方向に対して前記保持体の側方に位置する空間と、前記空間の前方と、前記空間の後方と、の少なくとも一部分に向けて光を照射する光源と、
 前記保持体に取り付けられ、前記空間と、前記空間の前方と、前記空間の後方と、の少なくとも一部分内に視野の少なくとも一部分が向けられている光学センサと、
を備える物体認識装置。
2. 1.に記載の物体認識装置において、
 前記光学センサの前記視野は、前記光学センサが位置する位置から、前記空間、前記空間の前方又は前記空間の後方に向けて、前記保持体の前記一方向に斜交する方向に向けられている、物体認識装置。
3. 1.又は2.に記載の物体認識装置において、
 前記空間を挟んで対向する一対の前記保持体を備え、
 前記一対の保持体の少なくとも一方に前記光源が取り付けられており、
 前記一対の保持体の少なくとも他方に前記光学センサが取り付けられている、物体認識装置。
4. 3.に記載の物体認識装置において、
 前記一対の保持体の一方に取り付けられた前記光学センサと、前記一対の保持体の他方に取り付けられた前記光学センサとは、前記一対の保持体の前記一方又は前記他方の前記一方向に斜交する方向に対向している、物体認識装置。
5. 1.から4までのいずれか一つに記載の物体認識装置において、
 前記保持体は、物品が収容される収容部に取り付けられている、物体認識装置。

Claims (5)

  1.  一方向に延伸する保持体と、
     前記一方向に沿って前記保持体に取り付けられ、前記保持体の前記一方向に対して前記保持体の側方に位置する空間と、前記空間の前方と、前記空間の後方と、の少なくとも一部分に向けて光を照射する光源と、
     前記保持体に取り付けられ、前記空間と、前記空間の前方と、前記空間の後方と、の少なくとも一部分内に視野の少なくとも一部分が向けられている光学センサと、
    を備える物体認識装置。
  2.  請求項1に記載の物体認識装置において、
     前記光学センサの前記視野は、前記光学センサが位置する位置から、前記空間、前記空間の前方又は前記空間の後方に向けて、前記保持体の前記一方向に斜交する方向に向けられている、物体認識装置。
  3.  請求項1又は2に記載の物体認識装置において、
     前記空間を挟んで対向する一対の前記保持体を備え、
     前記一対の保持体の少なくとも一方に前記光源が取り付けられており、
     前記一対の保持体の少なくとも他方に前記光学センサが取り付けられている、物体認識装置。
  4.  請求項3に記載の物体認識装置において、
     前記一対の保持体の一方に取り付けられた前記光学センサと、前記一対の保持体の他方に取り付けられた前記光学センサとは、前記一対の保持体の前記一方又は前記他方の前記一方向に斜交する方向に対向している、物体認識装置。
  5.  請求項1から4までのいずれか一項に記載の物体認識装置において、
     前記保持体は、物品が収容される収容部に取り付けられている、物体認識装置。
PCT/JP2020/002307 2020-01-23 2020-01-23 物体認識装置 WO2021149218A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2021572216A JPWO2021149218A1 (ja) 2020-01-23 2020-01-23
US17/792,015 US11941858B2 (en) 2020-01-23 2020-01-23 Object recognition device
PCT/JP2020/002307 WO2021149218A1 (ja) 2020-01-23 2020-01-23 物体認識装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/002307 WO2021149218A1 (ja) 2020-01-23 2020-01-23 物体認識装置

Publications (1)

Publication Number Publication Date
WO2021149218A1 true WO2021149218A1 (ja) 2021-07-29

Family

ID=76993309

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/002307 WO2021149218A1 (ja) 2020-01-23 2020-01-23 物体認識装置

Country Status (3)

Country Link
US (1) US11941858B2 (ja)
JP (1) JPWO2021149218A1 (ja)
WO (1) WO2021149218A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11947070B2 (en) 2020-01-23 2024-04-02 Nec Corporation Housing device

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2021149218A1 (ja) * 2020-01-23 2021-07-29

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11126297A (ja) * 1997-10-23 1999-05-11 Nippon Signal Co Ltd:The 歩行者検出装置
US20070064424A1 (en) * 2003-04-24 2007-03-22 Platt Terence C Multifunction edge device for powered doors
WO2010073387A1 (ja) * 2008-12-26 2010-07-01 三菱電機株式会社 スライドドア装置及びエレベータ
JP2010210265A (ja) * 2009-03-06 2010-09-24 Toshiba Corp 通過検出装置
JP2011161206A (ja) * 2010-01-13 2011-08-25 Ccs Inc 宝石鑑賞装置及び宝石鑑賞方法
JP2015226681A (ja) * 2014-06-02 2015-12-17 パナソニックIpマネジメント株式会社 オープンショーケース

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3746863A (en) * 1972-03-15 1973-07-17 Exotron Ind Ltd Light curtain control for a switch
US4794248A (en) * 1985-07-16 1988-12-27 Otis Elevator Company Detection device having energy transmitters located at vertically spaced apart points along movable doors
GB2254916B (en) * 1991-04-15 1993-12-22 John Trett Detection systems
US6279687B1 (en) * 1999-10-01 2001-08-28 Otis Elevator Company Method and system for detecting objects in a detection zone using modulated means
JP3788502B2 (ja) * 2000-08-11 2006-06-21 オムロン株式会社 光カーテン創成装置
JP4402400B2 (ja) 2003-08-28 2010-01-20 オリンパス株式会社 物体認識装置
DE602004020883D1 (de) * 2004-07-22 2009-06-10 Bea Sa Thermo-empfindliche Vorrichtung zur Anwesenheitsbestimmung von automatischen Türen
DE102005046443A1 (de) * 2004-09-30 2006-06-01 Omron Corp. Aufbau zur Anbringung eines optisch mehraxialen photoelektrischen Sensors
DE102013106185A1 (de) * 2013-06-13 2014-12-18 Pilz Auslandsbeteiligungen Gmbh Lichtgitterbauteil
EP2876467A1 (de) * 2013-11-25 2015-05-27 Sick Ag Lichtgitter
JP2016047210A (ja) 2014-08-28 2016-04-07 プレキシオン株式会社 光音響探触子及び光音響画像化装置
JPWO2021149219A1 (ja) * 2020-01-23 2021-07-29
JPWO2021149218A1 (ja) * 2020-01-23 2021-07-29

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11126297A (ja) * 1997-10-23 1999-05-11 Nippon Signal Co Ltd:The 歩行者検出装置
US20070064424A1 (en) * 2003-04-24 2007-03-22 Platt Terence C Multifunction edge device for powered doors
WO2010073387A1 (ja) * 2008-12-26 2010-07-01 三菱電機株式会社 スライドドア装置及びエレベータ
JP2010210265A (ja) * 2009-03-06 2010-09-24 Toshiba Corp 通過検出装置
JP2011161206A (ja) * 2010-01-13 2011-08-25 Ccs Inc 宝石鑑賞装置及び宝石鑑賞方法
JP2015226681A (ja) * 2014-06-02 2015-12-17 パナソニックIpマネジメント株式会社 オープンショーケース

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11947070B2 (en) 2020-01-23 2024-04-02 Nec Corporation Housing device

Also Published As

Publication number Publication date
US20230051817A1 (en) 2023-02-16
US11941858B2 (en) 2024-03-26
JPWO2021149218A1 (ja) 2021-07-29

Similar Documents

Publication Publication Date Title
WO2021149219A1 (ja) 収容装置
WO2021149218A1 (ja) 物体認識装置
IL292790A (en) View for a 3D image
US20060061652A1 (en) Stereoscopic image display system
JP2005500719A5 (ja)
ES2779600T3 (es) Procedimiento para operar un sistema de realidad virtual y sistema de realidad virtual
JP6213869B2 (ja) 照明システム
CN104981218B (zh) 皮肤处理设备
CA2057833A1 (en) Apparatus for Monitoring Moving Aquatic Organisms
CN112451962B (zh) 一种手柄控制追踪器
ITTO20100003A1 (it) Dispositivo e metodo per il riconoscimento di occhiali per visione stereoscopica, e relativometodo di controllo della visualizzazione di un flusso video stereoscopico
JPWO2021149219A5 (ja)
KR20200137234A (ko) 초소형 카메라 렌즈 및 적외선 플래시를 장착한 도촬기기 탐지 장치
JP5652801B2 (ja) 撮影防止システム、撮影防止方法、発光装置および反射装置
JPWO2021149218A5 (ja)
JP6593860B2 (ja) 輝度分布センサ
JP2019046438A (ja) 評価装置、及び評価方法
WO2015072977A1 (en) Augmented reality marker
EP2988247A1 (en) Data entry device with enhanced aiming
JP6951872B2 (ja) 駐車支援装置
KR101796722B1 (ko) 디스플레이용 오브젝트 및 이를 이용한 디스플레이 기능 발생장치
WO2022181412A1 (ja) 入力支援機構、入力システム
JP3148920U (ja) 防盗機能付き煙草陳列装置、及び、煙草陳列棚用の防盗装置
KR101626422B1 (ko) 센서 값에 따라 표시부를 조정하는 전자장치
US20240085000A1 (en) Wall mounted laser projector device

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20915969

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021572216

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20915969

Country of ref document: EP

Kind code of ref document: A1