WO2016035736A1 - 周期運動観測システム - Google Patents

周期運動観測システム Download PDF

Info

Publication number
WO2016035736A1
WO2016035736A1 PCT/JP2015/074604 JP2015074604W WO2016035736A1 WO 2016035736 A1 WO2016035736 A1 WO 2016035736A1 JP 2015074604 W JP2015074604 W JP 2015074604W WO 2016035736 A1 WO2016035736 A1 WO 2016035736A1
Authority
WO
WIPO (PCT)
Prior art keywords
light emission
image
observation
phase
light source
Prior art date
Application number
PCT/JP2015/074604
Other languages
English (en)
French (fr)
Inventor
満 高山
泰彦 林
Original Assignee
株式会社サンキコー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社サンキコー filed Critical 株式会社サンキコー
Priority to CN201580046002.7A priority Critical patent/CN106605402A/zh
Priority to EP15837923.0A priority patent/EP3190779A4/en
Priority to US15/506,875 priority patent/US9948844B2/en
Publication of WO2016035736A1 publication Critical patent/WO2016035736A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10Controlling the light source
    • H05B47/16Controlling the light source by timing means
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • G03B15/02Illuminating scene
    • G03B15/03Combinations of cameras with lighting apparatus; Flash units
    • G03B15/05Combinations of cameras with electronic flash apparatus; Electronic flash units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6811Motion detection based on the image signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/315Modulator illumination systems
    • H04N9/3155Modulator illumination systems for controlling the light source
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10Controlling the light source
    • H05B47/105Controlling the light source in response to determined parameters
    • H05B47/115Controlling the light source in response to determined parameters by determining the presence or movement of objects or living beings
    • H05B47/125Controlling the light source in response to determined parameters by determining the presence or movement of objects or living beings by using cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02BCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
    • Y02B20/00Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
    • Y02B20/40Control techniques providing energy savings, e.g. smart controller or presence detection

Definitions

  • the present invention relates to a periodic motion observation system that observes periodic motion at a predetermined observation point of an observation target by emitting flash light from a light source and irradiating the observation target with periodic motion.
  • stroboscopic effect in which a flash is emitted from a light source for a moment, and the target is stationary or slowly moving in slow motion when it is irradiated to an observation object that moves periodically while repeating the flash emission for a fixed period.
  • an observation target there are a motor that rotates at a high speed at a constant cycle, a printer that ejects droplets at a constant cycle and flies at a predetermined speed, a fuel ejection device, and the like.
  • a method using a so-called high-speed camera is known as a method for observing an observation object that periodically moves at a high speed.
  • the high-speed camera since the observation target is imaged with more frames than a normal camera, the observation target can be observed in a stationary state or a slowly moving state.
  • this high-speed camera is expensive, there is a problem that it is difficult to easily observe an observation object that periodically moves, and this increases the cost of observation.
  • Patent Document 1 discloses a light emission control device in which the light emission start time is shifted and the observation / imaging target is moved.
  • the light emission start time is shifted and the observation / imaging target is moved to the desired position, but also the long-time observation / imaging target over a plurality of cycles is moved.
  • the object 22 can be observed and imaged at a speed slower than the actual speed continuously for a long time.
  • the control unit 6 generates a strobe irradiation signal after a delay time (T + ⁇ ) (a time indicated by T + ⁇ in FIG. 4), and the flash irradiation unit irradiates the droplet with the flash light.
  • the light source emits light every time a signal is sent and irradiates diesel spray, and the light emission start time after injection is increased by the delay time interval, so observation and photographing are performed in a dark room. If it does, the imaging
  • JP 2013-61378 A Japanese Patent Laid-Open No. 2005-69835 Japanese Patent Laid-Open No. 8-271195
  • the present invention has been made in view of the above-described problem (technical background), and has a simple configuration and accurately identifies the occurrence location of the trajectory, speed, strain, and the like on the periodic motion of the observation target. It aims at providing the periodic motion observation system which can do.
  • the present invention provides a light source that emits flash light at predetermined intervals to irradiate an observation target that periodically moves, a light emission control device that controls the light emission of the light source, and the light source.
  • a light emission control device that controls the light emission of the light source
  • An imaging camera that captures the periodic motion of the predetermined observation point of the observation target
  • an image analysis device that analyzes an image related to the periodic motion of the predetermined observation point of the observation target captured by the imaging camera.
  • the light emission control device generates a light emission period generation unit that generates a light emission period of the light source to synchronize with the periodic motion of the observation target, generates a plurality of light emission phases by dividing the light emission period of the light source, and sequentially adds the light emission phases Alternatively, a light emission phase generation unit that sequentially moves the light emission start position of the light source to a predetermined light emission phase value by subtraction, and a light emission phase generation unit that generates a predetermined light emission phase within the light emission period generated by the light emission cycle generation unit.
  • a light emission signal generation unit that generates a light emission signal that causes the light source to sequentially emit light at each light emission start position that has been sequentially moved to the value.
  • the image analysis apparatus is configured to coordinate the observation point when the predetermined observation point of the observation target is irradiated by the light source based on the image related to the periodic movement of the predetermined observation point of the observation target captured by the imaging camera. And an observation point coordinate output unit for outputting each coordinate of the predetermined observation point to be observed extracted by the observation point coordinate extraction unit in a table format or a diagram format. According to this, it is possible to accurately identify the occurrence location of the trajectory, speed, strain, etc. on the periodic motion of the observation target with a simple configuration.
  • the light emission control device includes a light emission luminance generation unit that generates a light emission luminance of the light source by adjusting a light emission time ratio within the light emission time of the light source, and the light emission luminance generated by the light emission luminance generation unit generates a light emission signal. May be output to the unit.
  • the light emission phase generation unit of the light emission control device may wait for the light emission start position of the light source at a predetermined light emission phase value based on a predetermined phase standby time.
  • the light emission phase generation unit of the light emission control device may specify a light emission phase value corresponding to the first light emission start position of the light source according to the initial phase value of the motion period to be observed.
  • the image analysis apparatus is configured to perform periodic motion of an observation point to be observed captured by an imaging camera based on at least one parameter of hue, saturation, brightness, smoothing presence / absence, edge detection presence / absence, and edge threshold value. You may provide the image process part which processes the image which concerns on, and obtains an analysis image.
  • the image analysis apparatus scans an image related to the periodic motion of the observation point to be observed captured by the imaging camera one-dimensionally with a point, and then scans with a line in a direction perpendicular to the two-dimensional surface.
  • An image raster information conversion unit for obtaining an analysis image may be provided.
  • the present invention it is possible to observe the periodic motion of the observation target with a simple configuration without using an expensive device such as a high-speed camera.
  • the coordinates of the observation point to be observed are output in a table format or a diagram format, it is possible to accurately identify the occurrence location of the trajectory, speed, strain, etc. on the periodic motion of the observation target. For this reason, in addition to motors that rotate at high speeds, in various technical fields such as printers and fuel ejection devices where droplets are ejected at regular intervals and fly at a predetermined speed, various abnormalities to be observed are discovered while keeping costs low. This makes it possible to easily and reliably investigate the cause of the abnormality.
  • FIG. 1 is a configuration schematic diagram showing a mechanical configuration of the present system. It is a block diagram which shows the electric constitution of this system. It is a block diagram which shows the structure of the light emission control apparatus. It is a block diagram which shows the structure of an image analysis apparatus. It is a figure which shows the relationship of the light emission period etc. in the light emission control apparatus. It is a figure which shows the relationship of the light emission period etc. in the light emission control apparatus. It is the figure which represented the coordinate of the observation point in an image-analysis apparatus in figure format. It is a flowchart which shows the normal light emission mode process in the light emission control apparatus. It is a flowchart which shows the phase adjustment mode process in a light emission control apparatus. It is a flowchart which shows the measurement mode process in a light emission control apparatus. It is a flowchart which shows the analysis process in an image analyzer.
  • FIG. 1 is a schematic configuration diagram showing a mechanical configuration of a periodic motion observation system (hereinafter referred to as the present system) according to the present embodiment.
  • FIG. 2 is a block diagram showing the electrical configuration of the system.
  • This system observes the state of rotation of a DC motor as an observation target M that rotates at a high speed in a predetermined cycle.
  • the LED light source 1 emits a flash in a predetermined cycle and irradiates the observation target.
  • the light emission control device 2 that controls the light emission cycle, the light emission time, and the like, the imaging camera 3 that captures the observation target M irradiated with the flash light from the LED light source 1, and the image of the observation target M captured by the imaging camera 3 are analyzed. And an image analysis device 4.
  • the observation target M is fixed to the base 5, and the LED light source 2 and the imaging camera 3 are coaxial with each other while facing the observation target M. It is fixed.
  • Reference numeral 100 denotes a computer such as a PC, which is connected to the light emission control device 2 and has a function as the image analysis device 4 inside. [Configuration of light emission control device]
  • the light emission control device 2 generates the light emission period T by the light emission period generation unit 204 based on the various parameters input by the parameter input unit 201, and the light emission luminance by the light emission luminance generation unit 207.
  • a light emission signal is generated by the light emission signal generation unit 213 based on them, and the LED light source is controlled via the LED driver 214.
  • These can be constituted by well-known logic circuits (FPGA, CPU, storage element, etc.) mainly based on a transmission system such as a crystal oscillator having high frequency accuracy.
  • the parameter input unit 201 generally includes a computer 100 such as a personal computer (PC) equipped with a keyboard and a display.
  • PC personal computer
  • a parameter receiving unit such as MUP which receives parameters from the parameter input unit 201 and manages them in the in-circuit memory.
  • 203 is a parameter setting unit, which sets (stores) various parameters sent from the parameter receiving unit 202 in the apparatus. These parameters include a light emission cycle time 203a, a light emission time ratio 203b, a current control cycle 203c, a current control light emission time 203d, a phase division number 203e, a phase waiting time 203f, a phase addition / subtraction designation 203g, and a light emission initial phase value 203h.
  • the light emission cycle time 203 a and the light emission time ratio 203 b are used to generate the light emission cycle T of the LED light source 1.
  • the light emission cycle time 203a is the light emission cycle T of the LED light source 1 for synchronizing with the periodic motion of the observation target M, as shown in FIG. 5A.
  • the light emission time ratio 203b is a light emission / light-out time ratio when the light emission cycle T is 100, and the light emission time t is determined based on this time ratio.
  • the light emission cycle time 203 a and the light emission time ratio 203 b are output to the light emission cycle generation unit 204.
  • the light emission cycle generation unit 204 generates a light emission cycle T (signal) of the LED light source 1 based on the set light emission cycle time 203a and the light emission time ratio 203b.
  • reference numeral 206 denotes a reference clock oscillator that generates a high-speed basic clock signal using a crystal resonator / oscillator.
  • a period counter 207 generates a period signal by counting the basic clock. With the reference clock oscillator 206 and the cycle counter 207, the light emission cycle generation unit 204 can generate the light emission cycle T with high accuracy.
  • the current control period 203c and the current control light emission time 203d are used to generate the light emission luminance of the LED light source 1.
  • the current control period 203c is used when the light emission / extinction time ratio is further specified within the light emission time, and the period when the light emission time is PWM controlled to control the light emission / extinction time ratio. It is.
  • the current control light emission time 203d is the ratio of the light emission / extinguishing time within the light emission time for adjusting the light emission luminance.
  • the current control period 203c and the current control light emission time 203d are output to the light emission luminance generation unit 207.
  • the light emission luminance generation unit 207 generates the light emission luminance (signal) of the light source based on the set current control period 203c and current control light emission time 203d. For example, as shown in FIG. 6B, if the current control period 203c is shortened and the light emission time ratio 203b is reduced, the light emission luminance is lowered. Further, as shown in FIG. 6C, the light emission luminance is increased by increasing the current control period 203c and increasing the light emission time ratio 203b.
  • reference numeral 208 denotes a PWM counter that generates a cycle when the light emission time zone is subjected to PWM control within the light emission time when adjusting the light emission luminance.
  • Reference numeral 209 denotes a counter of the ratio of the light emission / extinguishing time within the light emission time when the light emission time zone is PWM controlled within the light emission time when adjusting the light emission luminance.
  • the number of phase divisions 203e, the phase waiting time 203f, the phase addition / subtraction designation 203g, and the light emission initial phase value 203h are the light emission phase value p that is the light emission start position P of the LED light source 1 (in this embodiment, , P0 to p7).
  • the phase division number 203e is the number of divisions when the light emission period T is divided into a plurality of light emission phases at an arbitrary magnification.
  • the phase waiting time 203f is a time when the light emission start position P of the light source is made to wait at a predetermined light emission phase value p.
  • the observation object M moves slowly in a slow motion state. It can be observed.
  • simply adding or subtracting the light emission phase may not slow down the operation to a sufficiently observable moving speed if the frequency is fast. For this reason, since it is necessary to wait for the light emission start position P of the light source at the same light emission phase value p and adjust the time, the standby time at the light emission phase value p is set.
  • phase addition / subtraction designation 203g is designation for addition or subtraction when the light emission phase is added or subtracted in order.
  • the light emission initial phase value 203h is an initial value of the light emission phase value p corresponding to the first light emission start position P. If the initial light emission phase value 203h is not specified, the initial light emission phase value p of the light emission cycle becomes the light emission initial phase value, but the observation target M and the LED light source 1 have the same frequency, but the initial phase values are not synchronized.
  • An arbitrary light emission phase value p corresponding to the number of phase divisions 203e is designated on the light source 1 side, and this can be used as the initial light emission start position P as the light emission initial phase value 203h.
  • the phase division number 203e, the phase waiting time 203f, the phase addition / subtraction designation 203g, and the light emission initial phase value 203h are output to the light emission phase generation unit 210.
  • the light emission phase generation unit 210 generates a plurality of light emission phases by dividing the light emission period T based on the phase division number 203e, the phase waiting time 203f, the phase addition / subtraction designation 203g, and the light emission initial phase value 203h. By sequentially adding or subtracting, the light emission start position P of the light source is sequentially moved to a predetermined light emission phase value p.
  • the light emission period T is divided to generate eight light emission phases, and therefore the light emission phase within the light emission period T according to the phase addition / subtraction designation.
  • the light emission start position P of the light source can be sequentially moved to each of the eight light emission phase values p0 to p7.
  • FIG. 5C shows a case where the light emission phase is 0
  • FIG. 5D shows a case where only the light emission phase 1 is added
  • FIG. 5E shows a case where only the light emission phase 2 is added.
  • the LED light source 1 emits light at each light emission start position P that is sequentially moved to predetermined light emission phase values p1 and p2.
  • 211 is a WAIT counter that generates a waiting time of one phase when the light emission phases are added or subtracted in order according to the phase division number 203e.
  • Reference numeral 212 denotes a repeat counter that generates a transfer movement range. With these WAIT counter and repeat counter, the light emission phase generation unit 210 can accurately move the light emission start position P to a predetermined light emission phase value p.
  • the light emission period T generated by the light emission period generation unit 204, the light emission luminance generated by the light emission luminance generation unit 207, and the predetermined light emission phase value p by the light emission phase generation unit 210 are output to the light emission signal generation unit 213, respectively. Is done. As shown in FIG. 5, the light emission signal generation unit 213 uses the LED light source at each light emission start position P that sequentially moves to a predetermined light emission phase value p based on the light emission period T, the light emission luminance, and the light emission phase value p. A light emission signal for sequentially emitting 1 with a predetermined light emission luminance is generated. *
  • the light emission signal generated by the light emission signal generation unit 213 is output to the LED driver 214.
  • the LED driver 214 converts the light emission signal generated by the light emission signal generation unit 213 into a driver signal for the LED light source 1, and causes the LED light source 1 to emit light with a predetermined light emission period T, light emission luminance, and light emission phase value p. . [Operation of the light emission control device 2]
  • FIG. 8 is a flowchart showing processing of the normal light emission mode of the light emission control device 2.
  • various parameters such as the light emission cycle time 203a, the light emission time ratio 203b, the current control cycle 203c, the current control light emission time 203d, the phase division number 203e, the phase waiting time 203f, the phase addition / subtraction designation 203g, and the light emission initial phase value 203h are set. It is set (stored) in 203, and the process proceeds to S12.
  • the light emission signal generation unit 213 generates a light emission signal based on the light emission period T, the light emission luminance, and the light emission phase value p, and causes the LED light source 1 to emit light via the LED driver 214.
  • the imaging camera 3 images a predetermined observation point of the observation target M irradiated to the LED light source 1, and proceeds to S13.
  • the imaging camera 3 re-images a predetermined observation point of the observation target M irradiated to the LED light source 1 after a predetermined time elapses, and proceeds to S14.
  • S14 it is determined whether or not the positions of two predetermined observation points imaged by the imaging camera 3 match, and if it is determined that the positions of the two predetermined observation points do not match (NO in S14), Proceed to S15. On the other hand, if it is determined that the positions of the two predetermined observation points match (YES in S14), the process proceeds to S6.
  • S16 it is determined whether or not adjustment of the light emission luminance of the light source is necessary, and if it is determined that adjustment of the light emission luminance of the light source is not necessary (NO in S16), this process is terminated. On the other hand, if it is determined that the light emission luminance of the light source needs to be adjusted (YES in S16), the process proceeds to S17.
  • FIG. 9 is a flowchart showing processing in the phase adjustment mode of the light emission control device 2.
  • phase division number 203e various parameters such as the phase division number 203e, the phase waiting time 203f, the phase addition / subtraction designation 203g, and the light emission initial phase value 203h are set (stored) in the parameter setting unit 203, and the process proceeds to S22.
  • the light emission phase generation unit 210 equally divides the light emission period T into the phase division number 203e, generates N light emission phases within the light emission period T, and proceeds to S23.
  • the light emission phase generation unit 210 moves the light emission start position P to the light emission phase value p0 corresponding to the light emission initial phase value 203h, and proceeds to S24.
  • the light emission phase generation unit 210 determines whether or not there is a phase addition / subtraction designation 203g. If it is determined that there is a phase addition / subtraction designation 203g (YES in S24), the process proceeds to S25, but there is no phase addition / subtraction designation 203g. Is determined (NO in S24), the process is terminated.
  • the light emission phase generation unit 210 determines whether or not the phase standby time 203f has been waited. If it is determined that the phase standby time 203f has been waited (YES in S25), the process proceeds to S26, while the phase standby time 203f. Is determined not to be on standby (NO in S25), the process of S25 is repeated.
  • the light emission phase generation unit 210 sets the light emission phase to +1 when the phase addition is specified, and sets the light emission phase to -1 when the phase subtraction is specified, and moves the light emission start position P by one light emission phase. And proceed to S27.
  • the phase addition / subtraction designation 203g has been described for the case where only one light emission phase is moved, but two or more may be moved.
  • FIG. 10 is a flowchart showing processing in the measurement mode of the light emission control device 2.
  • phase division number 203e various parameters such as the phase division number 203e, the phase addition / subtraction designation 203g, and the light emission initial phase value 203h are set (stored) in the parameter setting unit 203, and the process proceeds to S32.
  • the light emission phase generation unit 210 moves the light emission start position P to the light emission initial phase value p0, and proceeds to S33.
  • the imaging camera 3 images a predetermined observation point of the observation target M irradiated by the LED light source 1, and proceeds to S34.
  • phase addition if the phase addition is designated, the light emission phase is set to +1. If the phase subtraction is designated, the light emission phase is set to -1. The light emission start position P is moved by one light emission phase, and the process proceeds to S35.
  • the phase addition / subtraction designation 203g has been described for the case where only one phase is moved, but two or more may be moved.
  • S35 it is determined whether or not the number of imaging at a predetermined observation point of the observation target M by the imaging camera 3 has reached the phase division number 203e, and when it is determined that the number of imaging has reached the phase division number 203e (in S35) If YES, the process ends, but if it is determined that the number of imaging has not reached the phase division number 203e (NO in S35), the process returns to S33, and the processes of S33 to S35 are repeated.
  • the imaging camera 3 captures a predetermined observation point of the observation target M at each light emission phase value p within the light emission period T, and thus obtains a plurality of images corresponding to the phase division number 203e. be able to. Then, a plurality of images relating to a predetermined observation point of the observation target M imaged by the imaging camera 3 are sent to the image analysis device 4 and used for image analysis.
  • the image analysis device 4 extracts coordinates of a predetermined observation point of the observation target M imaged by the imaging camera 3 based on various parameters input by the parameter input unit 410. Output each coordinate in tabular or graphical format.
  • the image analysis apparatus 4 includes a computer 100 such as a personal computer (PC) equipped with a keyboard and a display, and the parameter input unit 410 is the keyboard.
  • a recognition mark (a black circle portion on the observation target M) provided in advance on the observation target M is used as shown in FIG. 5C.
  • 402 is a parameter receiving unit 402 that receives parameters from the parameter input unit 410 and manages them in the in-circuit memory.
  • 403 is a parameter setting unit that sets (stores) a parameter sent from the parameter receiving unit 402. These parameters include hue 403a, saturation 403b, lightness 403c, smoothing 403d, edge detection 403e, edge threshold 403f, Hough transform 403g, and calculation range 403h.
  • hue 403a, saturation 403b, lightness 403c, smoothing 403d (presence / absence), edge detection 403e (presence / absence), and edge threshold 403f are predetermined observations of the observation target M imaged by the imaging camera 3. It is used to convert the image related to a point (recognition mark) into raster information.
  • the hue 403a is one of color attributes, and is a difference in color such as red or yellow. Although the hue 403a varies depending on the classification method, the main hues 403a include red, yellow, green, blue, purple, and the like.
  • the saturation 403b is one of the three attributes of color, and is a measure of color vividness.
  • the brightness 403c is an indicator of the brightness (brightness level) of the LED light source 1.
  • the smoothing 403d is a process for removing a random noise on the image or reducing a fine change in density value for each pixel to obtain a smooth image in order to obtain an easy-to-view image.
  • the edge detection 403e is a process for detecting the edge of the image, such as the Canny method.
  • the edge threshold value 403f is a threshold value when detecting an edge.
  • the hue 403a, saturation 403b, lightness 403c, smoothing 403d (presence / absence), edge detection 403e (presence / absence), and edge threshold 403f are output to the image processing unit 404.
  • the image processing unit 404 uses the observation camera M captured by the imaging camera 3 based on the hue 403a, saturation 403b, brightness 403c, smoothing 403d (presence / absence), edge detection 403e (presence / absence), and edge threshold 403f. After processing the image so that the recognition mark as the observation point can be easily extracted from each image related to the observation point, the image is output to the image raster information converting unit 405.
  • the image raster information converting unit 405 first scans a two-dimensional original image with a point and then scans with a line in a direction perpendicular to the two-dimensional surface to obtain an analysis image on a two-dimensional surface.
  • the original image may be converted into a file format such as bmp, png, or jpeg to perform image processing.
  • These analysis images are output to the data storage unit 408 by specifying a storage directory and file name inside or outside the PC.
  • the Hough transform 403g and the calculation range 403h are used to extract coordinates from an image related to a predetermined observation point (recognition mark) of the observation target M imaged by the imaging camera 3.
  • the Hough transform 403g is one of digital image processing feature extraction methods, and mainly detects straight lines.
  • the calculation range 403h designates a range for image analysis.
  • the Hough transform 403g (presence / absence) and the calculation range 403h are output to the observation point coordinate extraction unit 406.
  • the observation point coordinate extraction unit 406 considers a predetermined observation point (recognition mark) of the observation target M based on the analysis image output from the image raster information conversion unit 405 while taking into account the Hough transform 403g and the calculation range 403h. Extract coordinates.
  • the observation point coordinate extraction unit 406 extracts a predetermined observation point (recognition mark) of the observation target M by converting the center of gravity and angle of each position into data using the calculation range 403h.
  • the extraction of the center of gravity is to extract the average coordinates of the effective pixel positions.
  • the recognition mark is a mark having an area such as ⁇ or ⁇
  • straight line extraction means that when the center of rotation of the observation object M is fixed, the straight line passing through the center is used as a recognition mark when measuring the movement angle, and the center angle is measured from the coordinate data of the center and the straight line.
  • the center of gravity and the straight line are used to extract the coordinates of a predetermined observation point (recognition mark), but the coordinates of the predetermined observation point (recognition mark) may be used by other methods.
  • the coordinates of the observation point (recognition mark) extracted by the observation point coordinate extraction unit 406 are output to the observation point coordinate output unit 407.
  • the observation point coordinate output unit 407 outputs the coordinates of the observation point (recognition mark) extracted by the observation point coordinate extraction unit 406 in a tabular format, and further, as shown in FIG. 7A, the observation point (recognition mark) By plotting each coordinate of Excel on Excel etc., it outputs to the figure form.
  • FIG. 7B the coordinate data extracted from the image data and the ideal trajectory data (circular solid line) may be displayed so as to be compared with each other.
  • the coordinates output in the table format and / or the diagram format are stored by the data storage unit 408.
  • the data storage unit 408 includes various data generated in the process, such as an analysis image converted into image raster information by the image raster information conversion unit 405 and coordinates output in a table format or a diagram format by the observation point coordinate output unit 407. Etc., and the various saved data are appropriately displayed on the display unit by the operation of the keyboard or the like by the user.
  • FIG. 11 is a flowchart showing processing in the analysis mode of the light emission analysis device.
  • various parameters such as hue 403a, saturation 403b, lightness 403c, smoothing 403d, edge detection 403e, edge threshold 403f, Hough transform 403g, and calculation range 403h are set in the parameter setting unit 403, and the process proceeds to S42.
  • the image processing unit 404 observes the image captured by the imaging camera 3 based on the hue 403a, saturation 403b, lightness 403c, smoothing 403d (presence / absence), edge detection 403e (presence / absence), and edge threshold 403f. After processing the image so that the recognition mark as the observation point can be easily extracted from the image related to the observation point of the target M, the image is output to the image raster information converting unit 405, and the process proceeds to S43.
  • the image raster information conversion unit 405 first scans a two-dimensional original image with a point, then scans with a line in a direction perpendicular thereto, obtains an analysis image on a two-dimensional surface, and proceeds to S44. move on.
  • the observation point coordinate extraction unit 406 considers a predetermined observation point (recognition mark) of the observation target M based on the analysis image output from the recognition mer cluster information generation unit while taking into account the Hough transform 403g and the calculation range 403h. ) (Center of gravity / straight line) is extracted, and the process proceeds to S45.
  • S45 it is determined whether or not the processed image has reached the total number of images according to the number of phase divisions 203e. If it is determined that the total number of images has been reached (YES in S45), the process proceeds to S46, while If it is determined that the number has not been reached (NO in S45), the process returns to S42, and the processes in S42 to S45 are repeated for the next image.
  • the observation point coordinate output unit 407 outputs the coordinates of the recognition marks extracted by the observation point coordinate extraction unit 406 in a tabular form, and further, as shown in FIG. 7, each observation point (recognition mark) is displayed. Plot the coordinates on Excel etc. and output them in the diagram format. At this time, as shown in FIG. 7B, the coordinate data extracted from the image data and the ideal trajectory data (circular solid line) may be displayed so as to be compared with each other.
  • the DC motor is exemplified as the observation target M, but the observation target M is not limited to this, and the period is not limited to this, such as a printer or a fuel ejection device in which droplets are ejected at a constant period and fly at a predetermined speed. Any observation target may be used as long as it moves.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Stroboscope Apparatuses (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

 簡易な構成にして、観測対象の周期運動上での軌跡、速度、ひずみ等の発生箇所を精度良く特定することができる周期運動観測システムの提供することを目的とする。光源1から所定周期ごとに閃光を発光して、観測対象Mの所定の観測点の周期運動を撮像カメラ3により撮像したあと、該撮像カメラ3により撮像された観測対象Mの所定の観測点の周期運動に係る画像を画像解析装置4により解析する。この画像解析装置4は、観測対象Mの所定の観測点の周期運動に係る画像に基づいて、観測対象の所定の観測点が光源により照射されたときの当該観測点の座標を抽出して、各座標を表形式または図形式で出力する 

Description

周期運動観測システム
 本発明は、光源から閃光を発光して、周期運動する観測対象に照射することにより、観測対象の所定の観測点の周期運動を観察する周期運動観測システムに関するものである。
 光源から一瞬だけ閃光を発光して、その閃光の発光を一定周期繰り返しながら、周期運動する観測対象に照射すると、観測対象が静止した状態、あるいはゆっくりと動くスローモーション状態で観測する、いわゆるストロボ効果は様々な分野で使用されている。例えば、観測対象として、一定周期で高速回転するモータのほか、液滴が一定周期で吐出されて所定の速度で飛翔するプリンタや燃料噴出装置などが挙げられる。
 ところで、高速で周期運動する観測対象を観測する方法として、いわゆるハイスピードカメラを用いる方法が知られている。ハイスピードカメラでは、通常のカメラよりも多くのコマで観測対象を撮像するため、観測対象を静止状態またはゆっくりと動く状態で観察することができる。ところが、このハイスピードカメラは、高価格であるため、周期運動する観測対象を手軽に観測することが困難であり、観測にコスト増を招くという問題があった。
 このため、従来、ハイスピードカメラを用いずに、ストロボ効果を用いて周期運動する観測対象を観測する種々の方法が提案されてきた。
 例えば、特許文献1は、発光開始時間をずらして、観察・撮像対象の移動を行うようにした発光制御装置が開示されている。ここでは、発光開始時間をずらして、観察・撮像対象を所望位置に移動させるばかりではなく、複数周期に跨る長時間の観察・撮像対象を移動させている。これにより、長時間に渡って連続的に対象物22を実際の速度よりもゆっくりとした速度で観察・撮像することができる。
 また、特許文献2は、制御手段6が、遅延時間(T+α)(図4中、T+αで示す時間)後にストロボ照射信号を発生させ、閃光照射部により閃光を液滴に照射し、同様の制御を繰り返すことにより、あたかも、同一の液滴200が高速度カメラで撮影されて、順次、移動(飛行)していくかのような像を得る液滴観測装置が開示されている。
 さらに、特許文献3は、光源は信号が送られる度に発光しディーゼル噴霧を照射し、噴射の度に噴射してからの発光開始時間は遅延時間間隔分だけ長くなるので観察や撮影を暗室で行えば、噴霧4がゆっくりと発達しているように捉えられる撮影法が開示されている。
特開2013-61378号公報 特開2005-69835号公報 特開平8-271956号公報
 しかしながら、ストロボ効果を用いた上記観測方法のいずれも、周期運動する観測対象を静止状態で観察したり、あるいはゆっくりと動くスローモーション状態で目視で観察するだけであった。このため、観測対象の運動速度が大きく変わったり、あるいは観測対象の軌跡が大きくずれた場合には目視でも観察することができるかもしれないが、観測対象の周期運動上での軌跡、速度、ひずみ等の発生箇所を精度良く特定するのは困難であるであるという問題があった。
 本発明は、上述の問題(技術的背景)に鑑みてなされたものであり、簡易な構成にして、観測対象の周期運動上での軌跡、速度、ひずみ等の発生箇所を精度良く特定することができる周期運動観測システムの提供することを目的とする。
 本発明は、上記目的を達成するために、所定周期ごとに閃光を発光して、周期運動する観測対象を照射する光源と、該光源の発光を制御する発光制御装置と、前記光源により照射された観測対象の所定の観測点の周期運動を撮像する撮像カメラと、該撮像カメラにより撮像された観測対象の所定の観測点の周期運動に係る画像を解析する画像解析装置とを備える。前記発光制御装置は、観測対象の周期運動に同期させるための光源の発光周期を生成する発光周期生成部と、光源の発光周期を分割して複数の発光位相を生成し、発光位相を順に加算または減算することにより光源の発光開始位置を所定の発光位相値に順に移動させる発光位相生成部と、前記発光周期生成部により生成された発光周期内において、前記発光位相生成部により所定の発光位相値に順に移動した各発光開始位置にて光源を順に発光させる発光信号を生成する発光信号生成部とを備える。前記画像解析装置は、前記撮像カメラにより撮像された観測対象の所定の観測点の周期運動に係る画像に基づいて、観測対象の所定の観測点が光源により照射されたときの当該観測点の座標を抽出する観測点座標抽出部と、該観測点座標抽出部により抽出された観測対象の当該所定の観測点の各座標を表形式または図形式で出力する観測点座標出力部とを備える。これによれば、簡易な構成にして、観測対象の周期運動上での軌跡、速度、ひずみ等の発生箇所を精度良く特定することができる。
 また、前記発光制御装置は、光源の発光時間内における発光時間割合を調整することにより光源の発光輝度を生成する発光輝度生成部を備え、発光輝度生成部により生成された発光輝度は発光信号生成部に出力されてもよい。
 また、前記発光制御装置の前記発光位相生成部は、所定の位相待機時間に基づいて光源の発光開始位置を所定の発光位相値で待機させてもよい。
 また、前記発光制御装置の前記発光位相生成部は、観測対象の運動周期の初期位相値に応じて光源の最初の発光開始位置に対応する発光位相値を指定してもよい。
 また、前記画像解析装置は、色相、彩度、明度、平滑化の有無、エッジ検出の有無、エッジ閾値の少なくとも一つのパラメータに基づいて、撮像カメラにより撮像された観測対象の観測点の周期運動に係る画像を加工して解析画像を得る画像加工部を備えてもよい。
 また、前記画像解析装置は、撮像カメラにより撮像された観測対象の観測点の周期運動に係る画像を、点で1次元スキャンしたあと、その直角方向に線でスキャンすることにより、2次元の面で解析画像を得る画像ラスター情報化部を備えてもよい。
 本発明によれば、ハイスピードカメラのような高価な装置を使用することなく、簡易な構成で観測対象の周期運動を観測することができる。また、観測対象の当該観測点の各座標を表形式または図形式で出力するため、観測対象の周期運動上での軌跡、速度、ひずみ等の発生箇所を精度良く特定することができる。このため高速回転するモータのほか、液滴が一定周期で吐出されて所定の速度で飛翔するプリンタや燃料噴出装置などの各技術分野において、コストを低く抑えながら、観測対象の様々な異常を発見し易くなり、異常の原因を簡単かつ確実に究明することが可能となる。
本システムの機械的構成を示す構成概略図である。 本システムの電気的構成を示すブロック図である。 発光制御装置の構成を示すブロック図である。 画像解析装置の構成を示すブロック図である。 発光制御装置における発光周期等の関係を示す図である。 発光制御装置における発光周期等の関係を示す図である。 画像解析装置における観測点の座標を図形式に表した図である。 発光制御装置における通常発光モード処理を示すフローチャートである。 発光制御装置における位相加減モード処理を示すフローチャートである。 発光制御装置における計測モード処理を示すフローチャートである。 画像解析装置における解析処理を示すフローチャートである。
 次に、本発明に係る周期運動観測システムの実施形態について図1~図11を参照しつつ説明する。 
[全体構成]
 図1は、本実施形態に係る周期運動観測システム(以下、本システムという)の機械的構成を示す構成概略図である。また、図2は、本システムの電気的構成を示すブロック図である。
 本システムは、所定周期で高速回転する観測対象MとしてのDCモータの回転の状況を観測するものであり、所定周期で閃光を発光して観測対象を照射するLED光源1と、LED光源1の発光周期や発光時間等を制御する発光制御装置2と、LED光源1により閃光が照射された観測対象Mを撮像する撮像カメラ3と、撮像カメラ3により撮影された観測対象Mの画像を解析する画像解析装置4とを備えてなる。
 本実施形態では、図1に示すように、観測対象Mが基台5に固定され、該観測対象Mに対向する状態でLED光源2と撮像カメラ3が互いに同軸となるように基台5に固定されている。なお、100は、PCなどのコンピュータであり、発光制御装置2に接続されるとともに、内部に画像解析装置4としての機能を有している。
[発光制御装置の構成]
 前記発光制御装置2は、図3に示すように、パラメータ入力部201により入力された各種パラメータに基づいて、発光周期生成部204により発光周期Tを生成し、発光輝度生成部207により発光輝度を生成し、かつ発光位相生成部210により複数の発光位相を生成したあと、それらに基づいて発光信号生成部213により発光信号を生成して、LEDドライバ214を介してLED光源を制御する。これらは、主に高い周波数精度を有する水晶発振器等の発信制度を基に周知の論理回路(FPGA、CPU、記憶素子等)により構成可能である。なお、パラメータ入力部201は、一般にはキーボードやディスプレイを備えるパソコン(PC)等のコンピュータ100からなる。
 以下、前記発光制御装置2について具体的に説明する。
 202は、パラメータ受信部(MUP等)であり、パラメータ入力部201からのパラメータを受信して、回路内メモリで管理する。
 203は、パラメータ設定部であり、パラメータ受信部202から送られてきた各種パラメータを装置内で設定(記憶)する。これらパラメータには、発光周期時間203a、発光時間割合203b、電流制御周期203c、電流制御発光時間203d、位相分割数203e、位相待機時間203f、位相加減算指定203gおよび発光初期位相値203hがある。
 これらパラメータのうち、発光周期時間203aおよび発光時間割合203bは、LED光源1の発光周期Tを生成するのに用いられる。
 具体的には、発光周期時間203aは、図5Aに示すように、観測対象Mの周期運動に同期させるためのLED光源1の発光周期Tとなる。
 また、発光時間割合203bは、発光周期Tを100とした場合の発光/消灯の時間割合であり、この時間割合に基づいて発光時間tが定められる。
 これら発光周期時間203aおよび発光時間割合203bは、発光周期生成部204に出力される。この発光周期生成部204は、図5Aに示すように、設定された発光周期時間203aおよび発光時間割合203bに基づいて、LED光源1の発光周期T(信号)を生成する。
 なお、206は、水晶振動子/発振器を使用した高速な基本クロック信号を生成する基準クロック発信器である。207は、基本クロックをカウントすることにより周期信号を生成する周期カウンタである。これら基準クロック発振器206および周期カウンタ207により、発光周期生成部204は発光周期Tを精度良く生成することが可能となる。
 また、上述の各パラメータのうち、電流制御周期203cおよび電流制御発光時間203dは、LED光源1の発光輝度を生成するのに用いられる。
 具体的には、電流制御周期203cは、発光時間内にさらに発光/消灯時間割合を指定する際に用いられ、その発光/消灯時間割合の制御を行うために発光時間をPWM制御するときの周期である。
 また、電流制御発光時間203dは、発光輝度の調整を行うための発光時間内の発光/消灯時間の割合である。
 これら電流制御周期203cおよび電流制御発光時間203dは、発光輝度生成部207に出力される。この発光輝度生成部207は、図6に示すように、設定された電流制御周期203cおよび電流制御発光時間203dに基づいて光源の発光輝度(信号)を生成する。例えば、図6Bに示すように、電流制御周期203cを短くし、かつ発光時間割合203bを小さくすれば発光輝度は低くなる。また、図6Cに示すように、電流制御周期203cを長くし、かつ発光時間割合203bを大きくすれば発光輝度は高くなる。
 なお、208は、発光輝度の調整を行う場合に、発光時間内に発光時間帯をPWM制御するときの周期を生成するPWM回数カウンタである。また、209は、発光輝度の調整を行う場合に、発光時間内に発光時間帯をPWM制御するときの発光時間内の発光/消灯時間の割合のカウンタである。これらPWM回数カウンタおよび発光/消灯時間カウンタにより、発光輝度生成部207は光源の発光輝度を精度良く生成することが可能となる。
 また、上述の各パラメータのうち、位相分割数203e、位相待機時間203f、位相加減算指定203gおよび発光初期位相値203hは、LED光源1の発光開始位置Pとなる発光位相値p(本実施形態では、p0~p7)を得るのに用いられる。
 具体的には、位相分割数203eは、発光周期Tを複数の発光位相に任意等倍で分割するときの分割数である。これにより発光周期T内の発光開始位置Pを所定の発光位相値pに移動することができるようになり、発光周期T内の位相分割数203eに応じた発光開始位置Pを得ることが可能となる。
 また、位相待機時間203fは、光源の発光開始位置Pを所定の発光位相値pで待機させるときの時間である。位相分割数203eに応じて発光位相を順に加算または減算することにより、LED光源1の発光開始位置Pを所定の発光位相値pに順に移動させると、観測対象Mがゆっくりと動くスローモーション状態で観測することができる。しかし、発光位相を単に加算または減算させるだけでは、周波数が早いと、十分に観測可能な移動速度まで動作が遅くならない場合がある。このため光源の発光開始位置Pを同じ発光位相値pにて待機させて時間を調整する必要があるので、その発光位相値pでの待機時間を設定する。
 また、位相加減算指定203gは、発光位相を順に加算または減算して移動させるときの加算または減算の指定である。
 また、発光初期位相値203hは、最初の発光開始位置Pに対応する発光位相値pの初期値である。発光初期位相値203hを指定しなければ、発光周期の初期の発光位相値pが発光初期位相値になるが、観測対象MとLED光源1は周波数が同じでも初期位相値は同期しないので、LED光源1側で位相分割数203eに応じた任意の発光位相値pを指定して、それを発光初期位相値203hとして最初の発光開始位置Pとすることができる。
 これら位相分割数203e、位相待機時間203f、位相加減算指定203gおよび発光初期位相値203hは、発光位相生成部210に出力される。この発光位相生成部210は、位相分割数203e、位相待機時間203f、位相加減算指定203gおよび発光初期位相値203hに基づいて、発光周期Tを分割して複数の発光位相を生成し、発光位相を順に加算または減算することにより光源の発光開始位置Pを所定の発光位相値pに順に移動させる。
 例えば、図5に示すように、位相分割数203e(N)が8の場合、発光周期Tを分割して8つの発光位相を生成するため、位相加減指定に応じて発光周期T内において発光位相を順に加算または減算すると、光源の発光開始位置Pを8つの各発光位相値p0~p7に順に移動させることができる。一例を挙げると、図5Cは発光位相0の場合、図5Dは発光位相1だけ加算した場合、図5Eは発光位相2だけ加算した場合として、発光開始位置Pを各発光位相値p1、p2に移動させており、後述するように所定の発光位相値p1、p2に順に移動した各発光開始位置PにてLED光源1が発光する。
 なお、211は、位相分割数203eに応じて、発光位相を順番に加算または減算させる場合の1位相の待機時間を生成するWAITカウンタである。また、212は、移送移動範囲を生成するリピートカウンタである。これらWAITカウンタおよびリピートカウンタにより、発光位相生成部210は、発光開始位置Pを所定の発光位相値pに精度良く移動させることが可能となる。
 これら発光周期生成部204により生成された発光周期Tと、発光輝度生成部207により生成された発光輝度と、発光位相生成部210による所定の発光位相値pは、それぞれ発光信号生成部213に出力される。この発光信号生成部213は、図5に示すように、これら発光周期T、発光輝度および発光位相値pに基づいて、所定の発光位相値pに順に移動した各発光開始位置Pにおいて、LED光源1を所定の発光輝度で順に発光させる発光信号を生成する。 
 発光信号生成部213により生成された発光信号はLEDドライバ214に出力される。このLEDドライバ214は、発光信号生成部213により生成された発光信号をLED光源1のドライバ信号に変換して、LED光源1を所定の発光周期T、発光輝度および発光位相値pにて発光せしめる。
[発光制御装置2の動作]
 図8は、発光制御装置2の通常発光モードの処理を示すフローチャートである。
 S11において、発光周期時間203a、発光時間割合203b、電流制御周期203c、電流制御発光時間203d、位相分割数203e、位相待機時間203f、位相加減算指定203gおよび発光初期位相値203hの各種パラメータが設定部203に設定(記憶)され、S12に進む。
 S12では、パラメータ設定部203に設定された各種パラメータに基づいて、発光周期生成部204、発光輝度生成部207および発光位相生成部210が発光周期T、発光輝度および発光位相値pを生成したあと、発光信号生成部213が発光周期T、発光輝度および発光位相値pに基づいて発光信号を生成し、LEDドライバ214を介してLED光源1を発光せしめる。このとき、撮像カメラ3は、LED光源1に照射された観測対象Mの所定の観測点を撮像し、S13に進む。
 S13では、撮像カメラ3は、所定の時間経過後、LED光源1に照射された観測対象Mの所定の観測点を再撮像し、S14に進む。
 S14では、撮像カメラ3に撮像された2つの所定の観測点の位置が一致したかどうかを判断し、2つの所定の観測点の位置が一致していないと判断した場合(S14でNO)、S15に進む。一方、2つの所定の観測点の位置が一致したと判断した場合(S14でYES)、S6に進む。
 S15では、所定の時間経過後の観測点の移動量から周期誤差を算出して、発光周期時間203aを再設定し、S12に戻る。
 S16では、光源の発光輝度の調整が必要かどうかを判断して、光源の発光輝度の調整が必要でないと判断した場合(S16でNO)、本処理を終了する。一方、光源の発光輝度の調整が必要であると判断した場合(S16でYES)、S17に進む。
 S17では、光源の発光輝度の調整を行うため、電流制御周期203cおよび電流制御発光時間203dを再設定し、S16に戻る。
 図9は、発光制御装置2の位相加減モードの処理を示すフローチャートである。
 S21において、位相分割数203e、位相待機時間203f、位相加減算指定203gおよび発光初期位相値203hの各種パラメータがパラメータ設定部203に設定(記憶)され、S22に進む。
 S22では、発光位相生成部210が、発光周期Tを位相分割数203eに均等分割し、発光周期T内にN個の発光位相を生成し、S23に進む。
 S23では、発光位相生成部210が、発光初期位相値203hに応じた発光位相値p0に発光開始位置Pを移動させ、S24に進む。
 S24では、発光位相生成部210が、位相加減算指定203gがあるか否かを判断し、位相加減算指定203gがあると判断した場合(S24でYES)、S25に進む一方、位相加減算指定203gがないと判断した場合(S24でNO)、本処理を終了する。
 S25では、発光位相生成部210が、位相待機時間203fを待機したか否かを判断し、位相待機時間203fを待機したと判断した場合(S25でYES)、S26に進む一方、位相待機時間203fを待機していないと判断した場合(S25でNO)、S25の処理を繰り返す。
 S26では、発光位相生成部210が、位相加算指定の場合には発光位相を+1にし、位相減算指定の場合には発光位相を-1にして、発光開始位置Pを1つの発光位相分だけ移動させ、S27に進む。なお、位相加減算指定203gは、発光位相を1つだけ移動する場合を説明したが、2つ以上移動してもよい。
 S27では、発光位相生成部210が、位相加減算指定203gの解除があるか否かを判断して、位相加減算指定203gの解除があると判断した場合(S27でYES)、本処理を終了する一方、位相加減算指定203gの解除がないと判断した場合(S27でNO)、S24に戻って、S24~S27の処理を繰り返す。
 図10は、発光制御装置2の計測モードの処理を示すフローチャートである。
 S31において、位相分割数203e、位相加減算指定203gおよび発光初期位相値203hの各種パラメータがパラメータ設定部203に設定(記憶)され、S32に進む。
 S32では、発光位相生成部210が、発光開始位置Pを発光初期位相値p0に移動させ、S33に進む。
 S33では、撮像カメラ3が、LED光源1により照射された観測対象Mの所定の観測点を撮像し、S34に進む。
 S34では、位相加算指定の場合には発光位相を+1にし、位相減算指定の場合には発光位相を-1にして、発光開始位置Pを1つの発光位相分だけ移動し、S35に進む。なお、位相加減算指定203gは、位相を1つだけ移動する場合を説明したが、2つ以上移動してもよい。
 S35では、撮像カメラ3による観測対象Mの所定の観測点の撮像回数が位相分割数203eに達したか否かを判断し、撮像回数が位相分割数203eに達したと判断した場合(S35でYES)、処理を終了する一方、撮像回数が位相分割数203eに達していないと判断した場合(S35でNO)、S33に戻り、S33~S35の処理を繰り返す。
 これにより撮像カメラ3は、図5に示すように、発光周期T内の各発光位相値pにおいて観測対象Mの所定の観測点を撮像するため、位相分割数203eに応じた複数の画像を得ることができる。そして、これら撮像カメラ3により撮像された観測対象Mの所定の観測点に係る複数の画像は、画像解析装置4に送られて画像分析に用いられることになる。
[画像解析装置4の構成]
 前記画像解析装置4は、図4に示すように、パラメータ入力部410により入力された各種パラメータに基づいて、撮像カメラ3により撮像された観測対象Mの所定の観測点の座標を抽出して、各座標を表形式または図形式で出力する。この画像解析装置4は、キーボードやディスプレイを備えるパソコン(PC)等のコンピュータ100からなり、パラメータ入力部410は当該キーボードである。なお、本実施形態では、観測対象Mの所定の観測点として、図5Cに示すように、観測対象Mにあらかじめ設けられた認識マーク(観測対象M上の黒丸部分)を用いるものとする。
 以下、前記画像解析装置4について具体的に説明する。
 402は、パラメータ受信部402であり、パラメータ入力部410からのパラメータを受信して、回路内メモリで管理する。
 403は、パラメータ設定部であり、パラメータ受信部402から送られてきたパラメータを設定(記憶)する。これらのパラメータには、色相403a、彩度403b、明度403c、平滑化403d、エッジ検出403e、エッジ閾値403f、ハフ変換403g、計算範囲403hがある。
 これらパラメータのうち、色相403a、彩度403b、明度403c、平滑化403d(の有無)、エッジ検出403e(の有無)、エッジ閾値403fは、撮像カメラ3により撮像された観測対象Mの所定の観測点(認識マーク)に係る画像をラスター情報化するのに用いられる。
 具体的には、色相403aは、色の属性の一つであり、赤や黄色といった色味の違いのことである。色相403aは、その分類の方法によって異なるが、主な色相403aとして赤、黄、緑、青、紫などがある。また、彩度403bは、色の三属性の1つであり、色の鮮やかさの尺度である。また、明度403cは、LED光源1の明るさ(輝きの程度)の指標である。
 また、平滑化403dは、画像に乗ったランダムなノイズを除去したり、画素ごとの濃度値の細かい変化を少なくし、見やすい画像を得るために滑らかな画像にする処理である。
 また、エッジ検出403eは、キャニー法などのように画像のエッジを検出する処理である。また、エッジ閾値403fは、エッジを検出するときの閾値である。
 これら色相403a、彩度403b、明度403c、平滑化403d(の有無)、エッジ検出403e(の有無)、エッジ閾値403fは、画像加工部404に出力される。この画像加工部404は、色相403a、彩度403b、明度403c、平滑化403d(の有無)、エッジ検出403e(の有無)、エッジ閾値403fに基づいて、撮像カメラ3により撮像された観測対象Mの観測点に係る各画像から、観測点である認識マークを抽出しやすいように画像に加工を施したあとに、画像ラスター情報化部405に出力する。
 前記画像ラスター情報化部405は、2次元の元画像を、まず点で1次元スキャンしたあと、その直角方向に線でスキャンして、2次元の面で解析画像を得る。このラスタースキャンを行うために、必要であれば元画像をbmp、png、jpegなどのファイル形式に変換して画像処理を行ってもよい。これら解析画像は、PC内部または外部の保存ディレクトリおよびファイル名を指定してデータ保存部408に出力される。
 一方、これら画像解析パラメータのうち、ハフ変換403gおよび計算範囲403hは、撮像カメラ3により撮像された観測対象Mの所定の観測点(認識マーク)に係る画像から座標を抽出するのに用いられる。
 具体的には、ハフ変換403gは、デジタル画像処理用特徴抽出法の一つであり、主に直線の検出を行う。また、計算範囲403hは、画像解析を行う範囲を指定する。
 これらハフ変換403g(の有無)および計算範囲403hは、観測点座標抽出部406に出力される。この観測点座標抽出部406は、ハフ変換403gおよび計算範囲403hを加味しながら、画像ラスター情報化部405から出力された解析画像に基づいて、観測対象Mの所定の観測点(認識マーク)の座標を抽出する。
 例えば、観測点座標抽出部406は、観測対象Mの所定の観測点(認識マーク)を計算範囲403hにより各位置の重心および角度をデータ化して抽出する。この重心の抽出とは、有効な画素の位置の平均座標を抽出することであり、認識マークが○や△などの面積を有するマークの場合は観測対象Mが回転するなど、形状の認識が難しい場合があるので、その重心の抽出を行う。また、直線の抽出とは、観測対象Mの回転の中心が確定している場合、その移動角度を計測する際に中心を通る直線を認識マークとし、中心と直線の座標データから中心角を計測する。なお、本実施形態では、所定の観測点(認識マーク)の座標を抽出するのに重心と直線を用いたが、その他の方法により所定の観測点(認識マーク)の座標を用いてもよい。
 この観測点座標抽出部406により抽出された観測点(認識マーク)の座標は、観測点座標出力部407に出力される。この観測点座標出力部407は、観測点座標抽出部406により抽出された観測点(認識マーク)の座標を表形式に出力したり、さらには図7Aに示すように、観測点(認識マーク)の各座標をエクセル等の上でプロットすることにより図形式に出力する。このとき、図7Bに示すように、前記画像データから抽出した座標データと理想軌跡データ(円形の実線)を重ねて表示するなどして比較可能な状態に出力してもよい。これら表形式および/または図形式に出力された座標はデータ保存部408により保存される。
 前記データ保存部408は、画像ラスター情報化部405により画像ラスター情報化された解析画像や、観測点座標出力部407により表形式または図形式に出力された座標など、処理過程で生じた各種データ等を保存するものであり、保存された各種データ等はユーザによるキーボード等の操作により、適宜、表示部に表示される。
[画像解析装置4の動作]
 図11は、発光解析装置の解析モードの処理を示すフローチャートである。
 S41において、色相403a、彩度403b、明度403c、平滑化403d、エッジ検出403e、エッジ閾値403f、ハフ変換403g、計算範囲403hの各種パラメータがパラメータ設定部403に設定され、S42に進む。
 S42では、画像加工部404が、色相403a、彩度403b、明度403c、平滑化403d(の有無)、エッジ検出403e(の有無)、エッジ閾値403fに基づいて、撮像カメラ3により撮像された観測対象Mの観測点に係る画像から、観測点である認識マークを抽出しやすいように画像に加工を施したあとに、画像ラスター情報化部405に出力し、S43に進む。
 S43では、画像ラスター情報化部405が、2次元の元画像を、まず点で1次元スキャンしたあと、その直角方向に線でスキャンして、2次元の面で解析画像を得て、S44に進む。
 S44では、観測点座標抽出部406が、ハフ変換403gおよび計算範囲403hを加味しながら、認識マークラスタ情報化部から出力された解析画像に基づいて、観測対象Mの所定の観測点(認識マーク)の座標(重心・直線)を抽出し、S45に進む。
 S45では、処理した画像が位相分割数203eに応じた全画像数に到達したか否かを判断し、全画像数に到達したと判断した場合(S45でYES)、S46に進む一方、全画像数に到達していないと判断した場合(S45でNO)、S42に戻り、次の画像についてS42~S45の処理を繰り返す。
 S46では、観測点座標出力部407が、観測点座標抽出部406により抽出された認識マークの座標を表形式に出力したり、さらには図7に示すように、観測点(認識マーク)の各座標をエクセル等の上でプロットすることにより図形式に出力する。このとき、図7Bに示すように、前記画像データから抽出した座標データと理想軌跡データ(円形の実線)を重ねて表示するなどして比較可能な状態に出力してもよい。
 以上より、ハイスピードカメラのような高価な装置を使用することなく、簡易な構成で観測対象Mの周期運動を観測することができる。また、観測対象Mの当該観測点の各座標を表形式または図形式で出力するため、観測対象Mの周期運動上での軌跡、速度、ひずみ等の発生箇所を精度良く特定することができる。このため、コストを低く抑えながら、観測対象Mの様々な異常を発見し易くなり、異常の原因を簡単かつ確実に究明することが可能となる。
 なお、本実施形態では、観測対象MとしてDCモータを例示したが、これに限定されるものではなく、液滴が一定周期で吐出されて所定の速度で飛翔するプリンタや燃料噴出装置など、周期運動するものであればどのような観測対象であってもよい。
 以上、図面を参照して本発明の実施形態を説明したが、本発明は、図示した実施形態のものに限定されない。図示された実施形態に対して、本発明と同一の範囲内において、あるいは均等の範囲内において、種々の修正や変形を加えることが可能である。
1・・・LED光源
2・・・光源制御装置
 201・・・パラメータ入力部
 202・・・パラメータ受信部
 203・・・パラメータ設定部
 204・・・発光周期生成部
 207・・・発光輝度生成部
 210・・・発光位相生成部
 213・・・発光信号生成部
 214・・・LEDドライバ
3・・・撮像カメラ
4・・・画像解析装置
 401・・・パラメータ入力部
 402・・・パラメータ受信部
 403・・・パラメータ設定部
 404・・・画像加工部
 405・・・画像ラスター情報化部
 406・・・観測点座標抽出部
 407・・・観測点座標出力部
 408・・・データ保存部

Claims (6)

  1.  所定周期ごとに閃光を発光して、周期運動する観測対象を照射する光源と、該光源の発光を制御する発光制御装置と、前記光源により照射された観測対象の所定の観測点の周期運動を撮像する撮像カメラと、該撮像カメラにより撮像された観測対象の所定の観測点の周期運動に係る画像を解析する画像解析装置とを備え、
     前記発光制御装置は、
     観測対象の周期運動に同期させるための光源の発光周期を生成する発光周期生成部と、
     光源の発光周期を分割して複数の発光位相を生成し、発光位相を順に加算または減算することにより光源の発光開始位置を所定の発光位相値に順に移動させる発光位相生成部と、
     前記発光周期生成部により生成された発光周期内において、前記発光位相生成部により所定の発光位相値に順に移動した各発光開始位置にて光源を順に発光させる発光信号を生成する発光信号生成部とを備え、
     前記画像解析装置は、
     前記撮像カメラにより撮像された観測対象の所定の観測点の周期運動に係る画像に基づいて、観測対象の所定の観測点が光源により照射されたときの当該観測点の座標を抽出する観測点座標抽出部と、
     該観測点座標抽出部により抽出された観測対象の当該所定の観測点の各座標を表形式または図形式で出力する観測点座標出力部とを備えることを特徴とする周期運動観測システム。
  2.  前記発光制御装置は、光源の発光時間内における発光時間割合を調整することにより光源の発光輝度を生成する発光輝度生成部を備え、発光輝度生成部により生成された発光輝度は発光信号生成部に出力される請求項1に記載の周期運動観測システム。
  3.  前記発光制御装置の前記発光位相生成部は、所定の位相待機時間に基づいて光源の発光開始位置を所定の発光位相値で待機させる請求項1に記載の周期運動観測システム。
  4.  前記発光制御装置の前記発光位相生成部は、観測対象の運動周期の初期位相値に応じて光源の最初の発光開始位置に対応する発光位相値を指定する請求項1に記載の周期運動観測システム。
  5.  前記画像解析装置は、色相、彩度、明度、平滑化の有無、エッジ検出の有無、エッジ閾値の少なくとも一つのパラメータに基づいて、撮像カメラにより撮像された観測対象の観測点の周期運動に係る画像を加工して解析画像を得る画像加工部を備える請求項1に記載の周期運動観測システム。
  6.  前記画像解析装置は、撮像カメラにより撮像された観測対象の観測点の周期運動に係る画像を、点で1次元スキャンしたあと、その直角方向に線でスキャンすることにより、2次元の面で解析画像を得る画像ラスター情報化部を備える請求項1に記載の周期運動観測システム。
PCT/JP2015/074604 2014-09-02 2015-08-31 周期運動観測システム WO2016035736A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201580046002.7A CN106605402A (zh) 2014-09-02 2015-08-31 周期运动观测系统
EP15837923.0A EP3190779A4 (en) 2014-09-02 2015-08-31 Periodic motion observation system
US15/506,875 US9948844B2 (en) 2014-09-02 2015-08-31 Periodic motion observation system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014-178435 2014-09-02
JP2014178435A JP5811425B1 (ja) 2014-09-02 2014-09-02 周期運動観測システム

Publications (1)

Publication Number Publication Date
WO2016035736A1 true WO2016035736A1 (ja) 2016-03-10

Family

ID=54550501

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/074604 WO2016035736A1 (ja) 2014-09-02 2015-08-31 周期運動観測システム

Country Status (6)

Country Link
US (1) US9948844B2 (ja)
EP (1) EP3190779A4 (ja)
JP (1) JP5811425B1 (ja)
CN (1) CN106605402A (ja)
TW (1) TW201630403A (ja)
WO (1) WO2016035736A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6063071B1 (ja) * 2016-01-29 2017-01-18 山佐株式会社 遊技機
JP6069550B1 (ja) * 2016-01-29 2017-02-01 山佐株式会社 遊技機
US10015412B2 (en) * 2016-09-06 2018-07-03 The Trustees For The Time Being Of Junior Barnes Family Trust Video capturing system and method for imaging cyclically moving objects
JP6148783B1 (ja) * 2016-12-14 2017-06-14 山佐株式会社 遊技機

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009100326A (ja) * 2007-10-18 2009-05-07 Keyence Corp 高速撮影装置、高速撮影装置の制御方法及びコンピュータプログラム
JP2013101086A (ja) * 2011-11-10 2013-05-23 Mitsubishi Electric Corp 回転速度測定装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5010412A (en) * 1988-12-27 1991-04-23 The Boeing Company High frequency, low power light source for video camera
US7718985B1 (en) * 2005-11-01 2010-05-18 University Of Central Florida Research Foundation, Inc. Advanced droplet and plasma targeting system
US8269855B2 (en) * 2009-01-15 2012-09-18 Essence Security International Ltd. Narrow bandwidth illumination image processing system and method
TWI422946B (zh) * 2009-10-30 2014-01-11 Univ Nat Chiao Tung 照明控制模組、包含其之攝影機及照明控制方法
JP5578442B2 (ja) * 2011-04-07 2014-08-27 カシオ計算機株式会社 撮像装置、画像合成方法、及びプログラム
US8334898B1 (en) * 2011-07-26 2012-12-18 ByteLight, Inc. Method and system for configuring an imaging device for the reception of digital pulse recognition information
CN102780845A (zh) * 2012-06-14 2012-11-14 清华大学 一种光源交替频闪同步摄像方法及视觉检测系统
EP3879334B1 (en) * 2014-07-31 2023-11-29 Mtt Innovation Incorporated Numerical approaches for free-form lensing: area parameterization free-form lensing
US10154202B2 (en) * 2014-10-15 2018-12-11 Samsung Electronics Co., Ltd. Apparatus for illuminating a scene and control method thereof
US9674415B2 (en) * 2014-12-22 2017-06-06 Google Inc. Time-of-flight camera system with scanning illuminator

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009100326A (ja) * 2007-10-18 2009-05-07 Keyence Corp 高速撮影装置、高速撮影装置の制御方法及びコンピュータプログラム
JP2013101086A (ja) * 2011-11-10 2013-05-23 Mitsubishi Electric Corp 回転速度測定装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3190779A4 *

Also Published As

Publication number Publication date
EP3190779A4 (en) 2018-03-28
EP3190779A1 (en) 2017-07-12
JP2016054345A (ja) 2016-04-14
US20170257542A1 (en) 2017-09-07
JP5811425B1 (ja) 2015-11-11
US9948844B2 (en) 2018-04-17
TW201630403A (zh) 2016-08-16
CN106605402A (zh) 2017-04-26

Similar Documents

Publication Publication Date Title
WO2016035736A1 (ja) 周期運動観測システム
JP2012148307A5 (ja)
KR20100135683A (ko) 롤링 셔터를 이용하여 촬상하는 촬상 장치
US10084968B2 (en) Photographic apparatus and exposure luminance adjustment method
US10778881B2 (en) Video signal processing device, video signal processing method, and camera device
JP2010175435A (ja) 三次元情報検出装置及び三次元情報検出方法
JP2016124138A5 (ja)
CN113631944A (zh) 距离测量装置以及图像生成方法
JP2015230229A (ja) 非接触レーザスキャニング分光画像取得装置及び分光画像取得方法
JP6521733B2 (ja) 回転速度計測装置
EP2645702A3 (en) Image capturing apparatus, control method therefor, and program
WO2021084891A1 (ja) 移動量推定装置、移動量推定方法、移動量推定プログラム、及び移動量推定システム
JPWO2018193704A1 (ja) 信号処理システム、信号処理装置、及び信号処理方法
JP2017103582A (ja) 画像生成装置及び計測システム
JP2004226072A (ja) 形状測定装置
US20200400791A1 (en) Light detection device, light detection method, and lidar device
JP4764295B2 (ja) 赤外線計測表示装置
JP2014021100A (ja) 3次元情報検出装置および3次元情報検出方法
JP2004178272A (ja) 画像処理装置および画像処理方法
JP6041752B2 (ja) カメラ焦点調整装置
JP2017158672A (ja) 電子内視鏡システム
JP2023091387A (ja) 情報処理装置、情報処理装置の制御方法、およびプログラム
JP5562582B2 (ja) 蛍光観察装置
CN206850881U (zh) 影像扫描装置
US20220292693A1 (en) Image processing device, image processing method, and program

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15837923

Country of ref document: EP

Kind code of ref document: A1

REEP Request for entry into the european phase

Ref document number: 2015837923

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2015837923

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 15506875

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE