WO2017110111A1 - 端末装置、診断システム、診断方法およびプログラム - Google Patents

端末装置、診断システム、診断方法およびプログラム Download PDF

Info

Publication number
WO2017110111A1
WO2017110111A1 PCT/JP2016/063664 JP2016063664W WO2017110111A1 WO 2017110111 A1 WO2017110111 A1 WO 2017110111A1 JP 2016063664 W JP2016063664 W JP 2016063664W WO 2017110111 A1 WO2017110111 A1 WO 2017110111A1
Authority
WO
WIPO (PCT)
Prior art keywords
analysis
sound
unit
information
analysis result
Prior art date
Application number
PCT/JP2016/063664
Other languages
English (en)
French (fr)
Inventor
勉 宇高
智之 三ツ橋
Original Assignee
富士ゼロックス株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士ゼロックス株式会社 filed Critical 富士ゼロックス株式会社
Priority to CN201680066137.4A priority Critical patent/CN108292509B/zh
Priority to AU2016378005A priority patent/AU2016378005B2/en
Publication of WO2017110111A1 publication Critical patent/WO2017110111A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01H—MEASUREMENT OF MECHANICAL VIBRATIONS OR ULTRASONIC, SONIC OR INFRASONIC WAVES
    • G01H3/00—Measuring characteristics of vibrations by using a detector in a fluid
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03G—ELECTROGRAPHY; ELECTROPHOTOGRAPHY; MAGNETOGRAPHY
    • G03G21/00—Arrangements not provided for by groups G03G13/00 - G03G19/00, e.g. cleaning, elimination of residual charge
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B41—PRINTING; LINING MACHINES; TYPEWRITERS; STAMPS
    • B41J—TYPEWRITERS; SELECTIVE PRINTING MECHANISMS, i.e. MECHANISMS PRINTING OTHERWISE THAN FROM A FORME; CORRECTION OF TYPOGRAPHICAL ERRORS
    • B41J29/00—Details of, or accessories for, typewriters or selective printing mechanisms not otherwise provided for
    • B41J29/38—Drives, motors, controls or automatic cut-off devices for the entire printing mechanism

Definitions

  • the present invention relates to a terminal device, a diagnostic system, a diagnostic method, and a program.
  • Patent Document 1 includes a RAM (Random Access Memory) or ROM (Read Only Memory) that stores normal operation sound of the image forming apparatus, and a microphone that detects the operation sound generated from the image forming apparatus.
  • RAM Random Access Memory
  • ROM Read Only Memory
  • a system is disclosed. This system identifies an abnormal portion of the image forming apparatus based on the first sound information stored in the RAM or ROM, the second sound information detected by the microphone, and the operation information of the image forming apparatus. To do.
  • Patent Document 2 discloses an image processing apparatus having an image forming unit that forms an image on a print sheet and a transport unit that transports the print sheet.
  • the image processing apparatus includes a sound converter that converts sound inside the apparatus into an electric signal, a sound analyzer that analyzes the electric signal converted by the sound converter to obtain a component for each frequency, and the sound analyzer And an output unit that outputs a component for each obtained frequency.
  • abnormal sound abnormal sound
  • the sound information obtained by inputting the sound generated in the device to be analyzed and the sound of the abnormal sound that has occurred in the past in a device equivalent to the device to be analyzed There is a case where the cause of the abnormal noise is clarified by comparing with information.
  • an acquisition unit that acquires sound information
  • a reception unit that receives position information regarding a position from which sound information is acquired, and a plurality of analysis results obtained by performing frequency analysis of the sound signal Analysis results selected from among the analysis results obtained by performing frequency analysis of the sound information acquired by the acquisition unit and the analysis results selected based on the position information received by the reception unit
  • the display device includes a display unit that displays at least one of the information associated with the selected analysis result.
  • the terminal device performs a time-frequency analysis of the sound information acquired by the acquisition unit, thereby generating an analysis result representing a temporal change in intensity distribution for each frequency; Information obtained from the analysis result generated by the frequency analysis unit, position information received by the reception unit, a transmission unit that transmits device information about the measurement target device to an external device, and frequency analysis of the sound signal The analysis result selected from the plurality of analysis results obtained based on the positional information received by the receiving unit among the analysis results similar to the analysis result generated by the frequency analyzing unit from the external device And a receiving unit for receiving.
  • the display unit may display the analysis result generated by the frequency analysis unit and the analysis result received by the reception unit.
  • the display unit may display different analysis results corresponding to the position information received by the receiving unit.
  • the display unit may display an appearance of a target device as a measurement target, and the reception unit is displayed on the display unit. You may receive the positional information on an object apparatus.
  • the display unit may display an appearance in a direction different from the appearance of the target device, and the reception unit may display the display unit for each appearance in a different direction. You may receive the positional information on the target apparatus displayed.
  • an acquisition unit that acquires sound information
  • a reception unit that receives position information regarding a position from which sound information is acquired
  • a plurality of analysis results obtained by performing frequency analysis of the sound signal The analysis result selected from among the analysis results obtained by performing frequency analysis of the sound information acquired by the acquisition unit and the analysis result selected based on the position information received by the reception unit
  • a display device that displays at least one of the information associated with the selected analysis result, and a plurality of analysis results obtained by performing frequency analysis of the sound signal and sound
  • a storage unit for storing the generated position information, and information obtained from an analysis result obtained by performing a frequency analysis of the sound information acquired by the acquisition unit together with the position information received by the reception unit from the terminal device.
  • a diagnostic system comprising: a server device comprising: a transmission unit that transmits at least one of a result and information associated with the selected analysis result to the terminal device.
  • an acquisition step for acquiring sound information a reception step for receiving position information regarding a position from which sound information is acquired, and a plurality of analysis results obtained by performing frequency analysis of the sound signal Analysis result selected from among the analysis results obtained by performing frequency analysis of the sound information acquired in the acquisition step and the analysis result selected based on the position information received in the reception step
  • the cause of abnormal noise can be identified by comparing the two displayed analysis results.
  • the terminal device of [3] it is possible to easily identify the cause of the abnormal noise based on the analysis result selected corresponding to the position information.
  • the terminal device of [6] it is possible to specify the cause of abnormal noise more accurately based on the position information, compared to the case of receiving the position information without displaying the appearance of the target device in different directions. .
  • the diagnostic method [8] it is possible to easily identify the cause of the abnormal noise as compared with the case of performing frequency analysis without specifying the position from which the sound information is acquired.
  • FIG. 1 is a system diagram showing a configuration of an abnormal sound diagnosis system according to an embodiment of the present invention.
  • the abnormal sound diagnosis system includes a portable terminal device 10 such as a personal computer, a smartphone, and a tablet terminal device, and a server device 50.
  • the present invention can be applied to any terminal device 10 as long as it is a device that can be connected to the server device 50 via a communication network.
  • the terminal device 10 is a tablet terminal device including a device such as a microphone capable of acquiring sound information and a touch panel capable of touch input.
  • the terminal device 10 is carried by a service person (maintenance personnel) who performs maintenance management, repair, etc. of the image forming apparatus 20 such as a printer used by the end user.
  • the terminal device 10 acquires an abnormal sound (abnormal sound) signal generated in the image forming apparatus 20 and performs frequency analysis on the acquired abnormal sound signal or frequency analysis results of past abnormal sound signals acquired from the server device 50. And the frequency analysis result waveform of the acquired abnormal sound signal are displayed.
  • the terminal device 10 and the server device 50 are connected via a wireless LAN terminal 30 such as a Wi-Fi router or the Internet communication network 40 to transmit and receive information.
  • a wireless LAN terminal 30 such as a Wi-Fi router or the Internet communication network 40 to transmit and receive information.
  • the terminal device 10 is a mobile phone device, a smartphone, or the like
  • a service person when an abnormal sound occurs in the image forming apparatus 20 that is a target electronic device installed at the end user's place, a service person carries the terminal device 10 and the image forming apparatus 20 Go to the place. And this service person acquires the abnormal sound signal by recording the abnormal sound generated using the terminal device 10, and performs the abnormal sound diagnosis for identifying the cause of the abnormal sound.
  • FIG. 2 shows a hardware configuration of the terminal device 10 in the abnormal sound diagnosis system of the present embodiment.
  • the terminal device 10 performs wireless communication with the CPU 11, the memory 12 that can temporarily store data, the storage device 13 such as a flash memory, and the wireless LAN terminal 30 to transmit data. And a wireless LAN interface (IF) 14 that performs reception, an input device 15 such as a touch sensor, a display device 16, and a microphone 17. These components are connected to each other via a control bus 18.
  • IF wireless LAN interface
  • a touch panel provided with a touch sensor for detecting a touch position as the input device 15 is provided on the display device 16, and display is performed using the touch panel and from the user. Is entered.
  • the CPU 11 executes predetermined processing based on a control program stored in the memory 12 or the storage device 13 to control the operation of the terminal device 10.
  • this control program can be obtained by downloading it via the Internet communication network 40 or the mobile phone network and provided to the CPU 11, or the program can be stored in a storage medium such as a CD-ROM. It is also possible to provide it to the CPU 11.
  • the terminal device 10 performs operations as described below by executing the control program described above, and assists the service person in identifying the cause of the abnormal noise.
  • FIG. 3 is a block diagram showing a functional configuration of the terminal device 10 realized by executing the control program.
  • the terminal device 10 includes a sound acquisition unit 31, a frequency analysis unit 32, a control unit 33, a sound data storage unit 34, a display unit 35, and a communication unit 36.
  • the display unit 35 displays various data based on the control by the control unit 33.
  • the communication unit 36 communicates with the server device 50 that is an external device.
  • the sound reproduction unit 37 reproduces the recorded sound data and converts it into sound information.
  • the position receiving unit 38 receives recording position information as position information that is a position for recording (acquiring) abnormal sound generated in the image forming apparatus 20 that is an apparatus to be analyzed.
  • the sound acquisition unit 31 acquires sound information by inputting an abnormal sound generated in the image forming apparatus 20 that is an analysis target apparatus.
  • the frequency analysis unit 32 performs a time frequency analysis (time-dependent frequency analysis) of the sound information acquired by the sound acquisition unit 31, and represents a frequency spectrum representing a time change of the signal intensity distribution for each frequency of the acquired abnormal sound signal. Waveform (frequency analysis result waveform) data is generated.
  • the frequency analysis unit 32 generates frequency spectrum waveform data by performing STFT (Short Time Fourier Transform) on the sound information acquired by the sound acquisition unit 31.
  • STFT Short Time Fourier Transform
  • the control unit 33 stores the frequency spectrum waveform data obtained by the frequency analysis unit 32 in the sound data storage unit 34 together with the sound data. And the control part 33 is controlled to display the frequency spectrum waveform obtained by the result of STFT on the display part 35 which is a touch panel.
  • the control unit 33 Based on the user's touch operation, the designation of the region including the abnormal signal component in the displayed frequency spectrum waveform is accepted.
  • the control unit 33 performs frequency analysis in the time axis direction on the frequency components in the region designated as the region including the abnormal sound signal component in the frequency spectrum waveform data obtained by the frequency analysis unit 32.
  • the frequency analysis unit 32 is instructed to execute a fast Fourier transform (1D-FFT (Fast Fourier Transform)). Therefore, the frequency analysis unit 32 performs fast Fourier transform in the time axis direction on the frequency component included in the designated region.
  • 1D-FFT Fast Fourier Transform
  • control unit 33 extracts the period and frequency information of the abnormal sound from the analysis result of the fast Fourier transform in the frequency analysis unit 32.
  • control unit 33 may not accept the designation of a region having a frequency equal to or lower than a preset frequency even when the region is designated as a region including an abnormal sound signal component.
  • control unit 33 indicates the received recording position information, the acquired sound cycle and frequency information, the model name of the image forming apparatus 20, model information such as a serial number, and the operating state of the image forming apparatus 20. It transmits to the server apparatus 50 via the communication part 36 with operating state information.
  • the operation status information includes information such as color printing or monochrome printing, double-sided printing or single-sided printing, whether the operation mode is scan, print, or copy, and the type of paper used. Can be included.
  • the control unit 33 receives the recording position information received from the position receiving unit 38 and the information obtained from the frequency spectrum waveform data obtained by the frequency analyzing unit 32 via the communication unit 36 and the server device 50. Send to.
  • the original sound data and the sound data are acquired from the spectrum waveform data obtained by performing frequency analysis of the sound information of the abnormal sound generated in the past in the device equivalent to the device of the image forming device 20.
  • the information is stored together with information such as the operating state of the device at the time, the cause of the abnormal noise, the method for dealing with the abnormal noise, the occurrence position of the abnormal noise (abnormal noise occurrence position information), and the like.
  • the server device 50 searches the data based on the period and frequency information of the abnormal sound transmitted from the terminal device 10 and the recording position information, and the frequency spectrum waveform obtained as a result of the frequency analysis by the frequency analysis unit 32. Extract frequency spectrum waveform data corresponding to the data. Then, the server device 50 transmits the found frequency spectrum waveform data to the terminal device 10 together with information such as sound data stored as abnormal sample waveform data.
  • control unit 33 receives the frequency spectrum waveform data corresponding to the frequency spectrum waveform data obtained as a result of the frequency analysis by the frequency analysis unit 32 from the server device 50 via the communication unit 36.
  • the control unit 33 controls the display unit 35 to display the frequency spectrum waveform obtained by performing the frequency analysis of the sound information acquired by the sound acquisition unit 31 and the spectrum waveform received from the server device 50 in parallel. .
  • the control unit 33 uses the received recording position information among the waveform data similar to the frequency spectrum waveform data obtained by the frequency analysis of the frequency analysis unit 32 from the plurality of frequency spectrum waveform data from the server device 50.
  • the waveform data preferentially selected based on the received data is received and displayed on the display unit 35.
  • the server device 50 includes a communication unit 51, a control unit 52, and a waveform data storage unit 53, as shown in FIG.
  • the waveform data storage unit 53 stores a plurality of frequency spectrum waveform data obtained by performing frequency analysis of sound information of abnormal sounds generated in the past in an apparatus equivalent to the image forming apparatus 20 that is an analysis target apparatus.
  • the waveform data storage unit 53 includes frequency spectrum waveform data obtained by analyzing time-frequency analysis of abnormal sound data acquired in advance, and the original sound. Information such as data, causes of abnormal noise, countermeasures, abnormal noise occurrence positions, and the like are stored for each model. Abnormal noise often exists in a plurality of regions of the apparatus, and information on the plurality of regions is stored as the abnormal sound occurrence position.
  • control unit 52 When the control unit 52 receives information on the period and frequency of abnormal noise from the terminal device 10, the control unit 52 receives the abnormal period and frequency received from the plurality of frequency spectrum waveform data stored in the waveform data storage unit 53. Based on the above information, the one similar to the waveform data of the frequency spectrum based on the abnormal sound acquired in the terminal device 10 is selected. Further, the control unit 52 transmits the waveform data treated preferentially based on the received recording position information from the selected waveform data to the terminal device 10 via the communication unit 51.
  • the terminal device 10 is described as performing STFT and fast Fourier transform on abnormal sound data, and transmitting the period and frequency information of the abnormal sound to the server device 50. Both the Fourier transform, STFT, and fast Fourier transform may be executed on the server device 50 side.
  • the abnormal sound data is transmitted as it is from the terminal device 10 to the server device 50, or the frequency spectrum waveform data as a result of performing STFT on the sound data is transmitted to the server device 50.
  • the STFT or fast Fourier transform is performed on the sound data.
  • the waveform data stored in the waveform data storage unit 53 has been described using a case where a plurality of regions where there is a high possibility of occurrence of abnormal noise are stored as the abnormal noise occurrence position information
  • the present invention is It is not limited to this.
  • the number of abnormal noise occurrence position information stored may be one, or the occurrence probability for each region may be stored.
  • an image as shown in FIG. Device information such as a serial number and an operation state is input (step S101).
  • FIG. 8 an illustration image of the appearance of the image forming apparatus 20 corresponding to the input apparatus information as shown in FIG. 8 is displayed on the screen (touch panel) which is the display unit 35 of the terminal apparatus 10.
  • auxiliary lines 90, 91, and 92 that divide the image forming apparatus 20 into six parts are displayed on the screen on which the image forming apparatus 20 is displayed.
  • These three auxiliary lines 90, 91, 92 are displayed so as to divide the image forming apparatus 20 into six areas a, area b, area c, area d, area e, and area f.
  • auxiliary lines 90, 91, 92 are represented by an area Aa, an area Ab, an area Ac, an area Ad, an area Ae, an area Af It is displayed to be divided into two.
  • the user can specify the recording position by selecting one of the area Aa, area Ab, area Ac, area Ad, area Ae, and area Af on the screen and performing a touch operation with the finger 65 (hereinafter referred to as a tap). .
  • the designated recording position is received by the control unit 33 as recording position information.
  • the appearance of the image forming apparatus 20 in different directions is displayed.
  • the appearance of 20 is rotated and changed by 90 degrees and displayed. That is, on the screen, the display image of the image forming apparatus 20 can be changed to any one of the front image A, the right side image B, the back image C, the left side image D, and the top image E. Yes.
  • the posture of the image forming apparatus 20 changes from the front image A to the left side.
  • the front image A, the right side image B, the back image C, or the left side image D changes to the top image E
  • the top image E changes to the front image A, right side. It changes to the image B, the back image C, or the left side image D. That is, the recording position information is changed for each appearance of the image forming apparatus 20 on the screen in different directions based on the user's operation.
  • Each of the images B to E is displayed with six auxiliary lines 90, 91, and 92 that are divided into six as in the case of the front image A, and the right side image B is displayed in the areas Ba, Bb, Bc, Bd, Be, and Bf. It is divided.
  • the back image C is divided into areas Ca, Cb, Cc, Cd, Ce, and Cf.
  • the left side image D is divided into regions Da, Db, Dc, Dd, De, and Df.
  • the top image E is divided into regions Ea, Eb, Ec, Ed, Ee, and Ef.
  • the three auxiliary lines 90, 91, and 92 are arranged so that the area into which the apparatus is divided differs depending on the apparatus information, the orientation of the apparatus, and the like.
  • an illustration image of the appearance of the image forming apparatus 20 has been described, but a photographic image of the appearance of the image forming apparatus 20 may be used.
  • the tap is made to slide left and right and up and down on the screen.
  • the present invention is not limited to this, and a rotation arrow key may be provided on the screen and the image may be rotated by tapping the rotation arrow key.
  • the recording position of the abnormal sound is accepted as the recording position information ( Step S102).
  • the terminal device 10 sets the operation mode to the sound recording mode, and starts recording by the microphone 17 brought close to the abnormal sound generation position where the recording position information of the image forming apparatus 20 is accepted. Then, sound data is acquired (step S103).
  • step S ⁇ b> 104 STFT is performed on the acquired sound data in the frequency analysis unit 32, thereby generating a frequency spectrum waveform representing a time change of the signal intensity distribution for each frequency (step S ⁇ b> 104).
  • this STFT is obtained by performing Fourier transform every short time and calculating the signal intensity for each frequency component according to the time change.
  • FIG. 12 shows a waveform example when the analysis result obtained by this STFT is an image of one frequency spectrum waveform.
  • the horizontal axis represents time and the vertical axis represents frequency, and the intensity for each frequency is represented by color.
  • this color difference is represented by a hatching pattern.
  • FIG. 12 illustrates the case where the intensity for each frequency is expressed by color, but this intensity can also be expressed by gradation.
  • the abnormal frequency component 61 is periodically generated at a specific frequency.
  • the low frequency component is a normal operation sound, not an abnormal noise frequency component.
  • the control unit 33 displays the frequency spectrum waveform on the display unit 35. Then, as shown in FIG. 13, the control unit 33 performs a display that prompts the user to designate a region that is estimated to be abnormal sound, with respect to the displayed frequency spectrum waveform.
  • the text “Please specify the area that seems to be abnormal” is displayed, prompting the user to specify the area that is estimated to be abnormal. I understand.
  • the user who is presented with the frequency spectrum waveform specifies the abnormal frequency component 61 and, for example, operates the touch panel to include the abnormal frequency component 61. Select the area to be displayed.
  • FIG. 14 shows an example of the selection area 80 selected by the user in this way.
  • a rectangular area including a plurality of abnormal frequency components 61 is designated as the selection area 80.
  • the fast Fourier transform (1D-FFT) for the frequency component included in the selection area 80 is executed by the frequency analysis unit 32 (step S105).
  • FIG. 15 shows an example of analysis results of the fast Fourier transform executed in this way.
  • the period and frequency of the abnormal sound are identified by detecting the period and frequency of the signal of the frequency component subjected to the fast Fourier transform.
  • a some period may be detected, but the period with the strongest signal strength is detected as an abnormal sound period.
  • a signal component having a long period of a predetermined period or longer is considered to be normal operation sound or indefinite period noise, the region of such a long period signal component is set as a determination exclusion region 62.
  • the analysis result in the determination exclusion area 62 is ignored.
  • a low frequency signal component equal to or lower than a predetermined frequency cannot be distinguished from a normal operation sound, such a low frequency signal component region is set as a determination exclusion region 63.
  • the analysis result in the determination exclusion area 63 is ignored.
  • the terminal device 10 transmits the information on the frequency and cycle of the abnormal sound and the recording position information on the recording position where the abnormal sound was recorded, together with the model information and the information on the operation state, to the server device 50 ( Step S106).
  • the recording position is the region Ab
  • the abnormal sound frequency is 4 kHz
  • the abnormal sound period is 2.0 seconds
  • the server device 50 searches the waveform data storage unit 53 based on the received frequency and period information of the abnormal sound (step S107).
  • step S107 Details of the operation in step S107 will be described with reference to an example of an operation for displaying the analysis result selected based on the flowchart in FIG. 16 and the position information in FIG. In FIG. 17, a case where the area Ab is received as the recording position information will be described as an example.
  • the server device 50 receives the frequency and period information of the abnormal sound and the recording position information from the terminal device 10 (step S201).
  • step S202 it is determined whether the frequency and period information of the received abnormal sound is similar to the waveform data stored in the waveform data storage unit 53 (step S202).
  • Waveform data determined to be similar is extracted (step S203).
  • the determination in step S202 is executed for all waveform data stored in the waveform data storage unit 53 (step S204), and an extraction list as shown in FIG. 17A is generated (step S205).
  • FIG. 17 only the waveform data of the frequency analysis result and the abnormal sound occurrence position information are extracted and described.
  • the original sound data as shown in FIG. Information such as the cause and how to deal with it is also stored corresponding to the waveform data.
  • step S206 it is determined whether or not any abnormal sound occurrence position information in the waveform data of the extraction list generated in step S205 matches the received recording position information.
  • the waveform data determined to match the position information is selected and extracted preferentially (step S207). Then, it is determined whether or not the determination in step S206 has been made for all waveform data in the generated extraction list (step S208).
  • the waveform data having the region Ab is extracted from the extraction list shown in FIG. 17A as the abnormal sound occurrence position information, and the waveform data 1 having the region Ab as shown in FIG. Waveform data 4 and waveform data 5 are treated preferentially (higher) in the extraction list.
  • the server device 50 transmits the extracted frequency spectrum waveform data to the terminal device 10 together with information such as the original sound data, the cause of the abnormal sound, and a countermeasure method thereof (step S108).
  • the terminal device 10 receives the frequency spectrum waveform data transmitted from the server device 50 (step S109). And the control part 33 of the terminal device 10 displays the received frequency spectrum waveform and the frequency spectrum waveform obtained by STFT on the display part 35 (step S110).
  • FIG. 18 shows a screen example of the terminal device 10 on which two frequency spectrum waveforms are displayed in this way.
  • the frequency spectrum waveform obtained by the STFT in the frequency analysis unit 32 is displayed as “analysis result waveform of abnormal sound recorded this time”. Further, the frequency spectrum waveform preferentially selected (high priority) based on the recording position information transmitted from the server device 50 is used as “past abnormal noise data”, which is a cause of abnormal noise such as “photoreceptor wear”. You can see that it is displayed with
  • a serviceman who wants to perform an abnormal noise diagnosis compares the two frequency spectrum waveforms and determines whether or not the abnormal noise components in the waveforms are similar, thereby specifying the cause of the abnormal noise.
  • a plurality of frequency spectrum waveforms are transmitted from the server device 50, for example, by tracing a frequency spectrum waveform image displayed as “past abnormal sound data” in the horizontal direction by a touch operation, As shown in FIG. 19, another frequency spectrum waveform having the next highest priority is displayed.
  • FIG. 19 shows an example of an image in which the frequency spectrum waveform of abnormal noise is displayed when the abnormal noise is caused by “the drive system motor is defective”.
  • the service person determines the cause of the abnormal noise by determining whether the frequency spectrum waveform of the abnormal noise acquired this time is more similar to the frequency spectrum waveform displayed in order of the high probability of the occurrence of the abnormal noise. Is identified.
  • identify the cause of this abnormal noise not only simply compare the shape of the frequency spectrum waveform, the period of the abnormal noise component, the frequency, the acquisition position of the abnormal noise, etc., but also the original sound data
  • the cause of the abnormal noise is identified by listening to and comparing the abnormal sound reproduced this time by 37 and the sound corresponding to the frequency spectrum waveform transmitted from the server device 50.
  • FIG. 20 shows another example of a display screen that displays the cause of abnormal noise.
  • FIG. 20 shows only the cause of abnormal noise and its countermeasure, and when the cause of abnormal noise is “photoconductor wear” and the message “Replace photoconductor” is displayed as the countermeasure. An example screen is shown. In this way, it is possible to designate and display the part that causes abnormal noise and the part number.
  • the terminal device 10 is a tablet terminal device
  • the present invention is not limited to this.
  • the operation panel of the image forming apparatus 20 is detachable from the main body, is communicable with the server device 50, and has a built-in sound information acquisition function
  • the operation panel is used as a terminal device. You may make it.
  • the said embodiment demonstrated using the case where the terminal device 10 incorporated the microphone 17, if the terminal device 10 is provided with the sound recording function, sound collection devices, such as a microphone, will be outside.
  • the sound information acquisition unit may be realized by connecting to the.
  • the target device for abnormal noise analysis is an image forming apparatus.
  • the target device for abnormal noise analysis is not limited to an image forming apparatus.
  • the present invention can be similarly applied to other devices as long as they are devices that can generate periodic noise.
  • Terminal device 10
  • Memory 13
  • Storage Device 14
  • Wireless LAN Interface (IF) DESCRIPTION OF SYMBOLS 15
  • Input apparatus 16
  • Display apparatus 17
  • Microphone 18
  • Control bus 20
  • Image forming apparatus 30
  • Sound acquisition part 32
  • Frequency analysis part 33
  • Control part 34
  • Sound data storage part 35
  • Display part 36
  • Communication part 37
  • Sound reproduction part 38
  • Position reception part 40
  • Server device 51
  • Communication unit 52
  • Waveform data storage unit 61
  • Waveform data storage unit 61
  • Finger 90, 91, 92 Auxiliary line

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Measurement Of Mechanical Vibrations Or Ultrasonic Waves (AREA)
  • Control Or Security For Electrophotography (AREA)
  • Facsimiles In General (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

音取得部（３１）は、解析対象の装置である画像形成装置（２０）で発生した異音を入力して音情報を取得する。位置受付部（３８）は、ユーザから、音情報を取得する録音位置情報を受け付ける。周波数解析部（３２）は、音取得部（３１）により取得された音情報のＳＴＦＴ（短時間フーリエ変換）を行って、周波数スペクトル波形データを生成する。制御部（３３）は、サーバ装置（５０）の複数の周波数スペクタル波形の中から、生成された周波数スペクトル波形に類似し、受け付けられた録音位置情報に基づいて選択されたスペクトル波形を受信する。

Description

端末装置、診断システム、診断方法およびプログラム
　本発明は、端末装置、診断システム、診断方法およびプログラムに関する。
　特許文献１には、画像形成装置の正常時の動作音を記憶しているＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）またはＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）と、画像形成装置から発生する動作音を検知するマイクロフォンとを有するシステムが開示されている。このシステムは、ＲＡＭまたはＲＯＭに記憶されている第１の音情報と、マイクロフォンにより検知された第２の音情報と、画像形成装置の動作情報とに基づいて、画像形成装置の異常箇所を特定する。
　特許文献２には、印刷用紙上に画像を形成する画像形成部と前記印刷用紙を搬送する搬送部とを有する画像処理装置が開示されている。この画像処理装置は、装置内部の音を電気信号に変換する音変換部と、この音変換部が変換した電気信号を解析して周波数ごとの成分を求める音解析部と、この音解析部が求めた周波数ごとの成分を出力する出力部とをさらに備えている。
日本国特開２００７－０７９２６３号公報 日本国特開２００８－２９０２８８号公報
　ある装置において異音（異常音）が発生した場合、解析対象の装置において発生した音を入力することにより取得した音情報と、解析対象の装置と同等の装置において過去に発生した異音の音情報とを比較して、その異音の原因を解明しようとする場合がある。
　このような場合に、取得した音情報の周波数解析結果の波形と似た波形が多数存在すると、異音の原因を特定することが難しい。
　本発明の少なくとも一の実施形態は、音情報を取得する位置を特定しないで周波数解析する場合と比較して、異音の原因の特定を容易にすることができる。
　［端末装置］
　［１］本発明の一実施形態は、音情報を取得する取得部と、音情報を取得する位置に関する位置情報を受け付ける受付部と、音信号の周波数解析を行って得た複数の解析結果の中から選択された解析結果であって、前記取得部により取得された音情報の周波数解析を行って得た解析結果および前記受付部により受け付けられた位置情報に基づいて選択された解析結果と、当該選択された解析結果に対応づけられた情報との、少なくとも一方を表示する表示部と、を備えた端末装置である。
　［２］［１］の端末装置は、前記取得部により取得された音情報の時間周波数解析を行うことにより、周波数毎の強度分布の時間変化を表す解析結果を生成する周波数解析部と、前記周波数解析部により生成された解析結果から得られた情報と、前記受付部により受け付けられた位置情報と、測定対象の装置に関する装置情報を外部装置に送信する送信部と、音信号の周波数解析を行って得た複数の解析結果の中から前記周波数解析部により生成された解析結果に類似する解析結果のうち前記受付部により受け付けられた位置情報に基づいて選択された解析結果を前記外部装置から受信する受信部と、をさらに備えていてもよい。前記表示部は、前記周波数解析部により生成された解析結果と、前記受信部により受信された解析結果とを表示してもよい。
　［３］［１］又は［２］の端末装置において、前記表示部は、前記受付部により受け付けられた位置情報に対応して異なる解析結果を表示してもよい。
　［４］［１］から［３］のいずれかの端末装置において、前記表示部は、複数の解析結果を表示する場合、前記受付部により受け付けられた位置情報に対応して表示する前記解析結果の順序を変更してもよい。
　［５］［１］から［４］のいずれかの端末装置において、前記表示部は、測定対象である対象装置の外観を表示してもよく、前記受付部は、前記表示部に表示される対象装置の位置情報を受け付けてもよい。
　［６］［５］の端末装置において、前記表示部は、前記対象装置の外観とは異なる方向の外観を表示してもよく、前記受付部は、異なる方向の外観ごとに、前記表示部に表示される対象装置の位置情報を受け付けてもよい。
　［診断システム］
　［７］本発明の一実施形態は、音情報を取得する取得部と、音情報を取得する位置に関する位置情報を受け付ける受付部と、音信号の周波数解析を行って得られた複数の解析結果の中から選択された解析結果であって、前記取得部により取得された音情報の周波数解析を行って得られた解析結果および前記受付部により受け付けられた位置情報に基づいて選択された解析結果と、当該選択された解析結果に対応づけられた情報との、少なくとも一方を表示する表示部と、を備えた端末装置と、音信号の周波数解析を行って得た複数の解析結果と音の発生位置情報を格納する格納部と、前記受付部により受け付けられた位置情報とともに前記取得部により取得された音情報の周波数解析を行って得た解析結果から得られた情報を前記端末装置から受信した場合、前記格納部に格納されている前記複数の解析結果の中から選択された解析結果であって、受信した解析結果および前記受付部により受け付けられた位置情報に基づいて選択された解析結果と、当該選択された解析結果に対応付けられた情報との、少なくとも一方を前記端末装置に送信する送信部と、を備えたサーバ装置と、を備えた診断システムである。
　［診断方法］
　［８］本発明の一実施形態は、音情報を取得する取得ステップと、音情報を取得する位置に関する位置情報を受け付ける受付ステップと、音信号の周波数解析を行って得られた複数の解析結果の中から選択された解析結果であって、前記取得ステップで取得された音情報の周波数解析を行って得られた解析結果および前記受付ステップで受け付けられた位置情報に基づいて選択された解析結果と、当該選択された解析結果に対応づけられた情報との、少なくとも一方を表示する表示ステップと、を備えた診断方法である。
　［プログラム］
　［９］本発明の一実施形態は、音情報を取得する取得ステップと、音情報を取得する位置に関する位置情報を受け付ける受付ステップと、音信号の周波数解析を行って得られた複数の解析結果の中から選択された解析結果であって、前記取得ステップで取得された音情報の周波数解析を行って得られた解析結果および前記受付ステップで受け付けられた位置情報に基づいて選択された解析結果と、当該選択された解析結果に対応づけられた情報との、少なくとも一方を表示する表示ステップと、をコンピュータに実行させるためのプログラムである。
　［１］の端末装置によれば、音情報を取得する位置を特定しないで周波数解析する場合と比較して、異音の原因の特定を容易にすることができる。
　［２］の端末装置によれば、表示された２つの解析結果を比較して、異音の原因を特定することができる。
　［３］の端末装置によれば、位置情報に対応して選択された解析結果を基に、異音の原因の特定を容易にすることができる。
　［４］の端末装置によれば、解析結果の順序を変更しない場合と比較して、異音の原因の可能性が高い解析結果から表示することができる。
　［５］の端末装置によれば、対象装置の外観を表示しないで位置情報を受け付ける場合と比較して、使用者に分かり易く示すことができる。
　［６］の端末装置によれば、対象装置の異なる方向の外観を表示しないで位置情報を受け付ける場合と比較して、位置情報に基づいてより精度よく異音の原因の特定をすることができる。
　［７］の診断システムによれば、音情報を取得する位置を特定しないで周波数解析する場合と比較して、異音の原因の特定を容易にすることができる。
　［８］の診断方法によれば、音情報を取得する位置を特定しないで周波数解析する場合と比較して、異音の原因の特定を容易にすることができる。
　［９］のプログラムによれば、音情報を取得する位置を特定しないで周波数解析する場合と比較して、異音の原因の特定を容易にすることができる。
本発明の一実施形態の異音診断システムの構成を示すシステム図である。 本発明の一実施形態における端末装置１０のハードウェア構成を示すブロック図である。 本発明の一実施形態における端末装置１０の機能構成を示すブロック図である。 本発明の一実施形態におけるサーバ装置５０の機能構成を示すブロック図である。 図４中の波形データ格納部５３に格納される情報の一例を示す図である。 本発明の一実施形態の異音診断システムの動作を説明するためのシーケンスチャートである。 機種名、シリアル番号、動作状態等の各種情報を入力する際の端末装置１０の表示画面例を示す図である。 端末装置１０の画像形成装置２０に対する録音位置をユーザにより入力する際の表示画面例を示す図である。 端末装置１０の画像形成装置２０に対する録音位置をユーザにより入力する際の表示画面例を示す図である。 録音位置をユーザに確認するための表示画面例を示す図である。 ＳＴＦＴの概念を説明するための図である。 ＳＴＦＴにより得られた解析結果に基づく周波数スペクトラム波形の画像例を示す図である。 周波数スペクトル波形をユーザに提示する際に、異音であると推定される領域を指定するようユーザに促すような表示を行った場合の一例を示す図である。 図１３の周波数スペクトラム波形の画像例において、ユーザにより選択された選択領域８０の一例を示す図である。 高速フーリエ変換の解析結果例を示す図である。 図６におけるステップＳ１０７の動作の詳細を説明するためのフローチャートである。 位置情報に基づいて選択された解析結果を表示する動作の一例を示す図であり、（ａ）は類似すると判定された波形データの抽出リストを示し、（ｂ）は（ａ）の抽出リストの波形データのうち、位置情報が一致すると判定された波形データが優先的に示された抽出リストを示す。 ２つの周波数スペクトル波形が表示された端末装置１０の画面例を示す図である。 図１８に示した画面例に対して、異音原因が異なる別の周波数スペクトル波形が表示された場合の画面例を示す図である。 図１８、図１９に示した画面例に対して、異音原因を表示する他の表示画面例を示す図である。
　次に、本発明の実施の形態について図面を参照して詳細に説明する。
　図１は本発明の一実施形態の異音診断システムの構成を示すシステム図である。
　本発明の一実施形態の異音診断システムは、図１に示されるように、パーソナルコンピュータ、スマートフォン、タブレット端末装置等の携帯可能な端末装置１０と、サーバ装置５０とから構成されている。
　なお、端末装置１０は、通信ネットワークを介してサーバ装置５０に接続可能な装置であればどのような装置であっても本発明を適用可能である。ただし、本実施形態では、端末装置１０が、音情報を取得可能なマイク等の装置および、タッチ入力が可能なタッチパネルを備えたタブレット端末装置の場合について説明する。
　端末装置１０は、エンドユーザが使用しているプリンタ等の画像形成装置２０の保守管理、修理等を行うサービスマン（保守要員）により携帯される。端末装置１０は、画像形成装置２０において発生した異音（異常音）信号を取得して、取得した異音信号を周波数解析したり、サーバ装置５０から取得した過去の異音信号の周波数解析結果の波形と取得した異音信号の周波数解析結果波形とを表示するために使用される。
　端末装置１０と、サーバ装置５０とは、Ｗｉ－Ｆｉルータ等の無線ＬＡＮターミナル３０や、インターネット通信網４０を介して接続され情報の送受信を行っている。
　なお、端末装置１０が携帯電話装置やスマートフォン等の場合には、端末装置１０とサーバ装置５０とを携帯電話回線網を介して接続して、不具合情報の送受信を行うようにすることも可能である。
　本実施形態の異音診断システムでは、エンドユーザの場所に設置された対象電子機器である画像形成装置２０に異音が発生した場合、サービスマンが端末装置１０を携帯して画像形成装置２０の場所に出向く。そして、このサービスマンが、端末装置１０を用いて発生している異音を録音することにより異音信号を取得して、異音の原因を特定する異音診断を行う。
　なお、画像形成装置２０にマイク等を設けて録音機能を持たせて、異音が発生した場合にその録音機能により異音を録音することも技術的には可能である。しかしながら、画像形成装置２０がエンドユーザのオフィス等に設置される場合、この画像形成装置２０に音を録音する機能を設けることは、セキュリティ上の理由により実現することが困難である。
　図２は、本実施形態の異音診断システムにおける端末装置１０のハードウェア構成を示す。
　端末装置１０は、図２に示されるように、ＣＰＵ１１、一時的にデータを保存可能なメモリ１２、フラッシュメモリ等の記憶装置１３、無線ＬＡＮターミナル３０との間で無線通信を行ってデータの送信及び受信を行う無線ＬＡＮインタフェース（ＩＦ）１４、タッチセンサ等の入力装置１５、表示装置１６、マイク１７を有する。これらの構成要素は、制御バス１８を介して互いに接続されている。
　本実施形態の端末装置１０では、表示装置１６上にタッチ位置を検出するためのタッチセンサが入力装置１５として設けられたタッチパネルが備えられていて、このタッチパネルを用いて表示が行われるとともにユーザからの入力が行われる。
　ＣＰＵ１１は、メモリ１２または記憶装置１３に格納された制御プログラムに基づいて所定の処理を実行して、端末装置１０の動作を制御する。なお、この制御プログラムは、インターネット通信網４０や携帯電話回線網を介してダウンロードすることにより入手してＣＰＵ１１に提供することも可能であるし、当該プログラムをＣＤ－ＲＯＭ等の記憶媒体に格納してＣＰＵ１１に提供することも可能である。
　本実施形態の端末装置１０は、上記の制御プログラムが実行されることにより以下に説明するような動作を行って、サービスマンが異音の原因を特定する業務の手助けを行う。
　図３は、上記の制御プログラムが実行されることにより実現される端末装置１０の機能構成を示すブロック図である。
　本実施形態の端末装置１０は、図３に示されるように、音取得部３１と、周波数解析部３２と、制御部３３と、音データ格納部３４と、表示部３５と、通信部３６と、音再生部３７と、位置受付部３８と、を備えている。
　表示部３５は、制御部３３による制御に基づいて各種データを表示する。通信部３６は、外部装置であるサーバ装置５０との間で通信を行う。音再生部３７は制御部３３による制御に基づいて、録音された音データ等を再生して音情報に変換する。
　位置受付部３８は、解析対象の装置である画像形成装置２０において発生した異音の音を録音する（取得する）位置である位置情報としての録音位置情報を受け付ける。
　音取得部３１は、解析対象の装置である画像形成装置２０において発生した異音を入力して音情報を取得する。
　周波数解析部３２は、音取得部３１により取得された音情報の時間周波数解析（時間依存周波数解析）を行って、取得された異音信号の周波数毎の信号強度分布の時間変化を表す周波数スペクトル波形（周波数解析結果の波形）データを生成する。
　具体的には、周波数解析部３２は、音取得部３１により取得された音情報に対してＳＴＦＴ（Ｓｈｏｒｔ　ｔｉｍｅ　Ｆｏｕｒｉｅｒ　ｔｒａｎｓｆｏｒｍ：短時間フーリエ変換）を行うことにより周波数スペクトル波形データを生成する。このＳＴＦＴの説明については後述する。
　制御部３３は、周波数解析部３２により得られた周波数スペクトル波形データを音データとともに音データ格納部３４に格納する。そして、制御部３３は、ＳＴＦＴの結果により得られた周波数スペクトル波形をタッチパネルである表示部３５上に表示するよう制御する。
　その後、ユーザがタッチパネルである表示部３５上に表示された周波数スペクトル波形において、異音の信号成分であると推測される領域を指でなぞる等のタッチ操作を行うと、制御部３３は、このユーザのタッチ操作に基づいて、表示された周波数スペクトル波形における異音の信号成分が含まれる領域の指定を受付ける。
　すると、制御部３３は、周波数解析部３２により得られた周波数スペクトル波形データのうち、異音の信号成分が含まれる領域として指定された領域の周波数成分に対して時間軸方向に周波数解析を行う高速フーリエ変換（１Ｄ－ＦＦＴ（Ｆａｓｔ　Ｆｏｕｒｉｅｒ　Ｔｒａｎｓｆｏｒｍ））の実行を周波数解析部３２に指示する。そのため、周波数解析部３２は、指示された領域に含まれる周波数成分に対して時間軸方向に高速フーリエ変換を行う。
　そして、制御部３３は、周波数解析部３２における高速フーリエ変換の解析結果から異音の周期および周波数の情報を抽出する。
　なお、異音が発生していない場合でも予め設定された周波数以下の低周波数の領域には、通常動作音の信号成分が常に含まれている。そのため、制御部３３は、予め設定された周波数以下の領域については、異音の信号成分が含まれる領域として指定された場合でも、その指定を受付けないようにしても良い。
　また、制御部３３は、受け付けられた録音位置情報と、取得した音の周期および周波数の情報を、画像形成装置２０の機種名、シリアル番号等の機種情報、画像形成装置２０の動作状態を示す動作状態情報とともに通信部３６を介してサーバ装置５０に送信する。この動作状態情報は、具体的には、カラー印刷なのか白黒印刷なのか、両面印刷なのか片面印刷なのか、動作モードはスキャン、プリント、複写のいずれなのか、使用用紙の種類等の情報を含むことができる。このようにして、制御部３３は、位置受付部３８から受け付けられた録音位置情報と周波数解析部３２により得られた周波数スペクトル波形データから得られた情報を、通信部３６を介してサーバ装置５０に送信する。
　サーバ装置５０では、画像形成装置２０の装置と同等の装置において過去に発生した異音の音情報の周波数解析を行って得られるスペクトル波形データを、元の音データ、その音データが取得された際の装置の動作状態、異音原因、異音への対処方法、異音の発生位置（異音発生位置情報）等の情報とともに格納している。
　そしてサーバ装置５０は、端末装置１０から送信されてきた異音の周期および周波数の情報、および録音位置情報に基づいてデータを検索し、周波数解析部３２による周波数解析の結果得られた周波数スペクトル波形データに対応する周波数スペクトル波形データを抽出する。そして、サーバ装置５０は、見つかった周波数スペクトル波形データを、異音のサンプル波形データとして格納している音データ等の情報等とともに、端末装置１０に送信する。
　この結果、制御部３３は、周波数解析部３２による周波数解析の結果得られた周波数スペクトル波形データに対応する周波数スペクトル波形データを、通信部３６を介してサーバ装置５０から受信する。
　制御部３３は、音取得部３１により取得された音情報の周波数解析を行って得られた周波数スペクトル波形と、サーバ装置５０から受信したスペクトル波形とを表示部３５に並列に表示するよう制御する。
　なお、制御部３３は、サーバ装置５０から複数の周波数スペクトル波形データの中から周波数解析部３２の周波数解析によって得られた周波数スペクトル波形データと類似する波形データのうち、受け付けられた録音位置情報に基づいて優先的に選択された波形データを受信して表示部３５に表示する。
　次に、本実施形態の異音解析システムにおけるサーバ装置５０の機能構成を図４のブロック図を参照して説明する。
　本実施形態のサーバ装置５０は、図４に示されるように、通信部５１と、制御部５２と、波形データ格納部５３とを備えている。
　波形データ格納部５３は、解析対象の装置である画像形成装置２０と同等の装置において過去に発生した異音の音情報の周波数解析を行って得られる複数の周波数スペクトル波形データを格納する。
　具体的には、波形データ格納部５３は、図５に示されるように、予め取得された異音の音データを時間周波数解析することにより得られた周波数スペクトル波形データと、元となった音データと、異音の原因と、その対処方法と、異音発生位置等の情報を、機種毎に格納している。異音は、装置の複数の領域で存在することが多く、異音発生位置として複数の領域の情報が格納されている。
　制御部５２は、端末装置１０から異音の周期や周波数の情報を受信した場合、波形データ格納部５３に格納されている複数の周波数スペクトルの波形データの中から、受信した異音周期や周波数の情報に基づいて、端末装置１０において取得された異音に基づく周波数スペクトルの波形データに類似するものを選択する。さらに、制御部５２は、選択された波形データの中から、受信した録音位置情報に基づいて優先的に扱われる波形データを、通信部５１を介して端末装置１０に送信する。
　なお、本実施形態では、端末装置１０において異音の音データのＳＴＦＴ、高速フーリエ変換を行って、異音の周期および周波数の情報をサーバ装置５０に送信するものとして説明しているが、高速フーリエ変換またはＳＴＦＴ、高速フーリエ変換の両方をサーバ装置５０側において実行するようにしても良い。
　この場合には、端末装置１０からサーバ装置５０に対して異音の音データをそのまま送信するか、または音データに対してＳＴＦＴを行った結果の周波数スペクトル波形データを送信し、サーバ装置５０において音データに対するＳＴＦＴや高速フーリエ変換を実行することになる。
　上記実施形態では、複数の解析結果のうち、異音の周波数、周期の情報に類似するものを抽出してから異音の位置情報に基づいて抽出したが、これに限られない。異音の録音位置情報に基づいて抽出してから、異音の周波数、周期の情報に類似するものを抽出するようにしてもよい。
　また、波形データ格納部５３に格納されている波形データにおいて、異音発生位置情報として、異音の発生する可能性の高い領域を複数格納している場合を用いて説明したが、本発明はこれに限定されるものではない。格納された異音発生位置情報は１つでもよく、また、それぞれの領域についての発生確率を格納するようにしてもよい。
　また、異音発生位置として複数の領域の情報が格納されているとして説明したが、本発明はこれに限定されるものではない。波形データごとに異音の発生する可能性の高い領域に優先順位をつけて格納するようにしてもよい。
　次に、本実施形態の異音診断システムの動作を図６のシーケンスチャートを参照して説明する。
　端末装置１０において、測定対象である対象装置としての画像形成装置２０の異音の原因を特定するための異音診断を行おうとする場合、図７に示すような画像が表示されて機種名、シリアル番号、動作状態等の装置情報等が入力される（ステップＳ１０１）。
　次に、端末装置１０の表示部３５である画面上（タッチパネル）に、図８に示すような入力された装置情報に対応した画像形成装置２０の外観のイラスト画像が表示される。
　端末装置１０には、画像形成装置２０を表示した画面上に、画像形成装置２０を６分割する補助線９０，９１，９２が重ねて表示されている。
　この３本の補助線９０，９１，９２が、画像形成装置２０を６つの領域ａ，領域ｂ，領域ｃ，領域ｄ，領域ｅ，領域ｆに分割するように表示される。図８では、装置の方向を示す正面画像Ａであるとの情報が加えられ、３本の補助線９０，９１，９２が、領域Ａａ、領域Ａｂ、領域Ａｃ、領域Ａｄ、領域Ａｅ、領域Ａｆに分割するように表示されている。ユーザが画面上の領域Ａａ，領域Ａｂ，領域Ａｃ，領域Ａｄ，領域Ａｅ，領域Ａｆのいずれかを選択して指６５でタッチ操作（以下、タップと記す）することにより、録音位置を指定できる。指定された録音位置は、録音位置情報として制御部３３に受け付けられる。
　また、図８に示す装置の正面画像Ａからユーザが指６５により画面上を左右上下方向にスライドさせるようなタップをすることで、画像形成装置２０の異なる方向の外観が表示され、画像形成装置２０の外観が９０度ずつ回転して変化して表示される。すなわち、画面上において、画像形成装置２０の表示画像を、正面画像Ａ、右側面画像Ｂ、背面画像Ｃ、左側面画像Ｄ、天面画像Ｅのいずれかに変更することができるようになっている。
　具体的には、図９に示すように、ユーザが画面上の画像形成装置２０の画像を左右にスライドさせるようなタップをする度に、画像形成装置２０の姿勢が、正面画像Ａから左側面画像Ｄ又は右側面画像Ｂへ、右側面画像Ｂから正面画像Ａ又は背面画像Ｃへ、背面画像Ｃから右側面画像Ｂ又は左側面画像Ｄへ、左側面画像Ｄから背面画像Ｃ又は正面画像Ａへと変化する。また、上下にスライドさせるようなタップする度に、正面画像Ａ、右側面画像Ｂ、背面画像Ｃ又は左側面画像Ｄから天面画像Ｅに変化し、天面画像Ｅから正面画像Ａ、右側面画像Ｂ、背面画像Ｃ又は左側面画像Ｄへ変化する。すなわち、ユーザの操作に基づいて、画面上の画像形成装置２０の異なる方向の外観ごとに、録音位置情報が変化される。また、各画像Ｂ～Ｅは、正面画像Ａと同様に６分割する補助線９０，９１，９２が重ねて表示され、右側面画像Ｂは、領域Ｂａ，Ｂｂ，Ｂｃ，Ｂｄ，Ｂｅ，Ｂｆに分割されている。背面画像Ｃは、領域Ｃａ，Ｃｂ，Ｃｃ，Ｃｄ，Ｃｅ，Ｃｆに分割されている。左側面画像Ｄは、領域Ｄａ，Ｄｂ，Ｄｃ，Ｄｄ，Ｄｅ，Ｄｆに分割されている。天面画像Ｅは、領域Ｅａ，Ｅｂ，Ｅｃ，Ｅｄ，Ｅｅ，Ｅｆに分割されている。この３本の補助線９０，９１，９２は、装置情報、装置の向き等によって、装置を分割する領域が異なるように配置される。
　ここでは、画像形成装置２０の外観のイラスト画像を用いて説明したが、画像形成装置２０の外観の写真画像を用いてもよい。また、画面上を左右上下にスライドさせるようなタップをすると説明したが、これに限らず、画面上に回転矢印キーを設けて、回転矢印キーをタップすることで画像を回転するようにしてもよい。
　すなわち、ユーザが音情報を取得する画像形成装置２０の外観の方向を指定し、さらに装置の外観の分割された領域を指定することにより、異音の録音位置が、録音位置情報として受け付けられる（ステップＳ１０２）。
　そして、端末装置１０は、図１０に示されるように、動作モードを音録音モードにして、画像形成装置２０の録音位置情報が受け付けられた異音発生位置に近づけられたマイク１７により録音を開始して、音データを取得する（ステップＳ１０３）。
　すると、端末装置１０では、取得された音データに対し、周波数解析部３２においてＳＴＦＴが行われることにより、周波数毎の信号強度分布の時間変化を表した周波数スペクトル波形が生成される（ステップＳ１０４）。
　このＳＴＦＴとは、図１１に示されるように、短時間毎にフーリエ変換を行って周波数成分毎の信号強度を時間変化に応じて演算したものである。図１２は、このＳＴＦＴにより得られた解析結果を１つの周波数スペクトル波形の画像とした場合の波形例をに示す。
　図１２に示した周波数スペクトル波形例では、横軸が時間、縦軸が周波数を表していて、周波数毎の強度は色によって表現されている。なお、図１２では、この色の違いをハッチングパターンにより表現している。また、図１２では周波数毎の強度が色によって表現される場合が例示されているが、この強度を階調により表現することも可能である。
　この図１２の周波数スペクトル波形例では、異音の周波数成分６１が特定の周波数に周期的に発生しているのが表示されているのが分かる。なお、この図１２に示した周波数スペクトル波形例において、低い周波数成分は通常の動作音であり、異音の周波数成分ではない。
　この図１２に示したような周波数スペクトル波形が得られると、制御部３３は、この周波数スペクトル波形を表示部３５に表示する。すると、制御部３３は、図１３に示すように、表示された周波数スペクトル波形に対して、異音であると推定される領域を指定するようユーザに促すような表示を行う。図１３に示した例では、「異音であると思われる領域を指定して下さい。」という文字が表示されて、ユーザに異音であると推定される領域を指定するよう促しているのが分かる。
　そして、このような表示を参照することにより、周波数スペクトル波形を提示されたユーザが、異音の周波数成分６１を特定して、例えばタッチパネルを操作することにより、この異音の周波数成分６１が含まれる領域を選択する。
　図１４は、このようにしてユーザにより選択された選択領域８０の一例を示す。図１４に示した例では、複数の異音の周波数成分６１を含むような長方形の領域が選択領域８０として指定されているのが分かる。
　そして、このように選択領域８０が指定されると、選択領域８０に含まれる周波数成分に対する高速フーリエ変換（１Ｄ－ＦＦＴ）が周波数解析部３２により実行される（ステップＳ１０５）。図１５は、このようにして実行された高速フーリエ変換の解析結果例を示す。
　なお、この図１５では、高速フーリエ変換を行った周波数成分の信号の周期および周波数が検出されることにより、異音の周期および周波数が特定されることになる。なお、異音には倍音成分等が含まれるため、複数の周期が検出される場合があるが、最も信号強度が強い周期が異音周期として検出される。
　また、所定の周期以上の長周期の信号成分は、通常動作音や不定周期雑音であると考えられるため、このような長周期の信号成分の領域は判定除外領域６２とされる。この判定除外領域６２における解析結果は無視される。
　さらに、所定の周波数以下の低周波の信号成分は、通常動作音と区別が付かないため、このような低周波の信号成分の領域は判定除外領域６３とされる。この判定除外領域６３における解析結果は無視される。
　端末装置１０は、この高速フーリエ変換の解析結果により、異音の周波数および周期の情報と異音を録音した録音位置に関する録音位置情報を機種情報や動作状態の情報とともにサーバ装置５０に送信する（ステップＳ１０６）。例えば、録音位置は領域Ａｂ、異音周波数は４ｋＨｚ、異音周期は２．０秒というような情報が、サーバ装置５０に送信される。
　すると、サーバ装置５０は、受信した異音の周波数、周期の情報に基づいて、波形データ格納部５３を検索する（ステップＳ１０７）。
　このステップＳ１０７の動作の詳細を、図１６のフローチャートと図１７の位置情報に基づいて選択された解析結果を表示する動作の一例を参照して説明する。図１７では、録音位置情報として領域Ａｂが受信された場合を例にして説明する。
　サーバ装置５０は、端末装置１０から異音の周波数、周期の情報、録音位置情報を受信する（ステップＳ２０１）。
　次に、受信した異音の周波数、周期情報が、波形データ格納部５３に格納されている波形データに類似するか否かが判定される（ステップＳ２０２）。類似すると判定された波形データが抽出される（ステップＳ２０３）。ステップＳ２０２における判定が、波形データ格納部５３に格納される全ての波形データにおいて実行され（ステップＳ２０４）、図１７の（ａ）に示すような抽出リストが生成される（ステップＳ２０５）。ここで、図１７では、周波数解析結果の波形データと、異音発生位置情報のみ抽出されて記載されているが、図５に示されているような元となった音データと、異音の原因と、その対処方法等の情報も波形データに対応して格納されている。
　次に、ステップＳ２０５において生成された抽出リストの波形データの異音発生位置情報の中に、受信した録音位置情報と一致するものがあるか否かが判定される（ステップＳ２０６）。
　ステップＳ２０５において生成された抽出リストのうち、位置情報が一致すると判定された波形データが選択されて、優先的に抽出される（ステップＳ２０７）。そして、生成された抽出リストの全ての波形データにおいて、ステップＳ２０６の判定がされたか否かが判定される（ステップＳ２０８）。
　すなわち、図１７の（ａ）に示された抽出リストのうち、異音発生位置情報として領域Ａｂを有する波形データが抽出され、図１７の（ｂ）に示すように領域Ａｂを有する波形データ１と波形データ４と波形データ５が抽出リストの中で優先的に（上位に）扱われる。
　そして、サーバ装置５０は、抽出した周波数スペクトル波形データを、元の音データ、異音原因、その対処方法等の情報とともに端末装置１０に送信する（ステップＳ１０８）。
　すると、端末装置１０では、サーバ装置５０から送信されてきた周波数スペクトル波形データを受信する（ステップＳ１０９）。そして、端末装置１０の制御部３３は、受信した周波数スペクトル波形と、ＳＴＦＴで得られた周波数スペクトル波形を表示部３５に表示させる（ステップＳ１１０）。
　図１８は、このようにして２つの周波数スペクトル波形が表示された端末装置１０の画面例を示す。
　図１８に示した画面例では、周波数解析部３２におけるＳＴＦＴにより得られた周波数スペクトル波形が、「今回録音した異音の解析結果波形」として表示されている。また、サーバ装置５０から送信されてきた録音位置情報により優先的に選択された（優先度の高い）周波数スペクトル波形が、「過去の異音データ」として、「感光体の摩耗」という異音原因とともに表示されているのが分かる。
　異音診断を行おうとするサービスマンは、この２つの周波数スペクトル波形を比較して、波形中の異音成分が類似しているか否かを判定することにより異音の原因を特定する。
　また、サーバ装置５０から複数の周波数スペクトル波形が送信されてきた場合には、例えば、「過去の異音データ」として表示されている周波数スペクトル波形の画像をタッチ操作により横方向になぞることにより、図１９のように次に優先度の高い別の周波数スペクトル波形が表示される。
　図１９は、異音原因が「駆動系モータの不良」である場合の異音の周波数スペクトル波形が表示された画像例を示している。
　このように複数の周波数スペクトル波形が送信されてきた場合には、異音の発生原因の可能性の高いものから選択されて表示される。サービスマンは、今回取得した異音の周波数スペクトル波形が、異音の発生原因の可能性の高い順に表示されたいずれの周波数スペクトル波形とより類似しているかを判定することにより、異音の原因を特定する。なお、この異音の原因の特定の際には、単に周波数スペクトル波形の形状や異音成分の周期や周波数や異音の取得位置等を比較するだけでなく、元の音データを音再生部３７により再生して今回取得した異音とサーバ装置５０から送信されてきた周波数スペクトル波形に対応した音とを聴き比べて、異音の原因を特定する。
　図２０は、異音の発生原因を表示する他の表示画面例を示す。
　図２０は、異音の発生原因とその対処方法のみを表示し、異音の原因が「感光体の摩耗」であって、対処方法として「感光体を交換」する旨が表示された場合の画面例を示している。
　このように、異音の発生原因パーツや部品番号を指定して表示するようにしてもよい。
　［変形例］
　上記実施形態では、録音位置情報に基づく動作をサーバ装置５０側で行う場合を用いて説明したが、これに限られない。この動作は、端末装置１０側で行うようにしてもよい。
　上記実施形態では、端末装置１０がタブレット端末装置である場合を用いて説明したが、本発明はこれに限定されるものではない。例えば、画像形成装置２０の操作パネルが本体から脱着可能な構成であって、サーバ装置５０と通信可能であり音情報の取得機能を内蔵しているような構成の場合、この操作パネルを端末装置とするようにしても良い。
　また、上記実施形態では、端末装置１０がマイク１７を内蔵している場合を用いて説明しているが、端末装置１０に音録音機能が備えられていれば、マイク等の集音装置を外部に接続することにより音情報の取得部を実現するようにしても良い。
　さらに、上記実施形態では、異音解析の対象装置が画像形成装置である場合を用いて説明しているが、異音解析の対象となる装置は画像形成装置に限定されるものではない。周期性を持った異音を発生させる可能性がある装置であれば、他の装置に対しても、本発明は同様に適用可能である。
　上記では種々の実施の形態を説明したが、これらの実施の形態を組み合わせて構成してもよい。
　また、本開示は上記の実施の形態に何ら限定されるものではなく、本開示の要旨を逸脱しない範囲で種々の形態で実施することができる。
　本出願は、２０１５年１２月２５日出願の日本特許出願（特願２０１５－２５４３２２）に基づくものであり、それらの内容はここに参照として取り込まれる。
　　１０　　端末装置
　　１１　　ＣＰＵ
　　１２　　メモリ
　　１３　　記憶装置
　　１４　　無線ＬＡＮインタフェース（ＩＦ）
　　１５　　入力装置
　　１６　　表示装置
　　１７　　マイク
　　１８　　制御バス
　　２０　　画像形成装置
　　３０　　無線ＬＡＮターミナル
　　３１　　音取得部
　　３２　　周波数解析部
　　３３　　制御部
　　３４　　音データ格納部
　　３５　　表示部
　　３６　　通信部
　　３７　　音再生部
　　３８　　位置受付部
　　４０　　インターネット通信網
　　５０　　サーバ装置
　　５１　　通信部
　　５２　　制御部
　　５３　　波形データ格納部
　　６１　　異音の周波数成分
　　６２、６３　　判定除外領域
　　６５　　指
　　９０、９１、９２　　補助線

Claims (9)

  1. 　音情報を取得する取得部と、
    　音情報を取得する位置に関する位置情報を受け付ける受付部と、
    　音信号の周波数解析を行って得た複数の解析結果の中から選択された解析結果であって、前記取得部により取得された音情報の周波数解析を行って得た解析結果および前記受付部により受け付けられた位置情報に基づいて選択された解析結果と、当該選択された解析結果に対応づけられた情報との、少なくとも一方を表示する表示部と、
    　を備えた端末装置。
  2. 　前記取得部により取得された音情報の時間周波数解析を行うことにより、周波数毎の強度分布の時間変化を表す解析結果を生成する周波数解析部と、
    　前記周波数解析部により生成された解析結果から得られた情報と、前記受付部により受け付けられた位置情報と、測定対象の装置に関する装置情報を外部装置に送信する送信部と、
    　音信号の周波数解析を行って得た複数の解析結果の中から前記周波数解析部により生成された解析結果に類似する解析結果のうち前記受付部により受け付けられた位置情報に基づいて選択された解析結果を前記外部装置から受信する受信部と、を備え、
    　前記表示部は、前記周波数解析部により生成された解析結果と、前記受信部により受信された解析結果とを表示する請求項１記載の端末装置。
  3. 　前記表示部は、前記受付部により受け付けられた位置情報に対応して異なる解析結果が表示される請求項１又は２記載の端末装置。
  4. 　前記表示部は、複数の解析結果を表示する場合、前記受付部により受け付けられた位置情報に対応して表示する前記解析結果の順序を変更する請求項１から３のいずれか１項記載の端末装置。
  5. 　前記表示部は、測定対象である対象装置の外観を表示し、
    　前記受付部は、前記表示部に表示される対象装置の位置情報を受け付ける請求項１から４のいずれか１項記載の端末装置。
  6. 　前記表示部は、前記対象装置の外観とは異なる方向の外観を表示し、
    　前記受付部は、異なる方向の外観ごとに、前記表示部に表示される対象装置の位置情報を受け付ける請求項５記載の端末装置。
  7. 　音情報を取得する取得部と、
    　音情報を取得する位置に関する位置情報を受け付ける受付部と、
    　音信号の周波数解析を行って得られた複数の解析結果の中から選択された解析結果であって、前記取得部により取得された音情報の周波数解析を行って得られた解析結果および前記受付部により受け付けられた位置情報に基づいて選択された解析結果と、当該選択された解析結果に対応づけられた情報との、少なくとも一方を表示する表示部と、を備えた端末装置と、
    　音信号の周波数解析を行って得た複数の解析結果と音の発生位置情報を格納する格納部と、
    　前記受付部により受け付けられた位置情報とともに前記取得部により取得された音情報の周波数解析を行って得た解析結果から得られた情報を前記端末装置から受信した場合、前記格納部に格納されている前記複数の解析結果の中から選択された解析結果であって、受信した解析結果および前記受付部により受け付けられた位置情報に基づいて選択された解析結果と、当該選択された解析結果に対応づけられた情報との、少なくとも一方を前記端末装置に送信する送信部と、を備えたサーバ装置と、
    　を備えた診断システム。
  8. 　音情報を取得する取得ステップと、
    　音情報を取得する位置に関する位置情報を受け付ける受付ステップと、
    　音信号の周波数解析を行って得られた複数の解析結果の中から選択された解析結果であって、前記取得ステップで取得された音情報の周波数解析を行って得られた解析結果および前記受付ステップで受け付けられた位置情報に基づいて選択された解析結果と、当該選択された解析結果に対応づけられた情報との、少なくとも一方を表示する表示ステップと、
    　を備えた診断方法。
  9. 　音情報を取得する取得ステップと、
    　音情報を取得する位置に関する位置情報を受け付ける受付ステップと、
    　音信号の周波数解析を行って得られた複数の解析結果の中から選択された解析結果であって、前記取得ステップで取得された音情報の周波数解析を行って得られた解析結果および前記受付ステップで受け付けられた位置情報に基づいて選択された解析結果と、当該選択された解析結果に対応づけられた情報との、少なくとも一方を表示する表示ステップと、
    　をコンピュータに実行させるためのプログラム。
     
PCT/JP2016/063664 2015-12-25 2016-05-06 端末装置、診断システム、診断方法およびプログラム WO2017110111A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201680066137.4A CN108292509B (zh) 2015-12-25 2016-05-06 终端装置、诊断系统、诊断方法以及程序
AU2016378005A AU2016378005B2 (en) 2015-12-25 2016-05-06 Terminal device, diagnosis system, diagnosis method, and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-254322 2015-12-25
JP2015254322A JP5939480B1 (ja) 2015-12-25 2015-12-25 端末装置、診断システムおよびプログラム

Publications (1)

Publication Number Publication Date
WO2017110111A1 true WO2017110111A1 (ja) 2017-06-29

Family

ID=56184732

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/063664 WO2017110111A1 (ja) 2015-12-25 2016-05-06 端末装置、診断システム、診断方法およびプログラム

Country Status (4)

Country Link
JP (1) JP5939480B1 (ja)
CN (1) CN108292509B (ja)
AU (1) AU2016378005B2 (ja)
WO (1) WO2017110111A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019207224A (ja) * 2018-05-29 2019-12-05 東芝産業機器システム株式会社 音響診断装置
CN113014735A (zh) * 2019-12-20 2021-06-22 东芝泰格有限公司 图像处理装置、信息处理方法以及记录介质
US11301181B2 (en) 2020-04-02 2022-04-12 Kyocera Document Solutions Inc. Diagnosing an image forming apparatus based on sound signal analysis
US11553094B2 (en) 2021-03-11 2023-01-10 Kyocera Document Solutions Inc. Electronic device capable of detecting occurrence of abnormal noise

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110602488B (zh) * 2019-09-18 2021-07-02 普联技术有限公司 一种日夜型摄像装置切换异常检测方法、装置及摄像装置
CN112863543A (zh) * 2019-11-28 2021-05-28 睿捷国际股份有限公司 利用声音监控设备的方法
CN113537044B (zh) * 2021-07-14 2022-08-26 哈尔滨理工大学 基于STFT与改进DenseNet的航空发动机故障诊断方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006184722A (ja) * 2004-12-28 2006-07-13 Canon Inc 自己診断機能を備えた画像形成装置
WO2010044452A1 (ja) * 2008-10-16 2010-04-22 国立大学法人長崎大学 情報判定支援方法、音情報判定方法、音情報判定支援装置、音情報判定装置、音情報判定支援システム及びプログラム
JP2011146871A (ja) * 2010-01-13 2011-07-28 Hitachi Ltd 音源探索装置及び音源探索方法
JP2011203146A (ja) * 2010-03-26 2011-10-13 Fujitsu Fsas Inc 音の監視方法及びシステム
US20130060359A1 (en) * 2011-08-02 2013-03-07 Hyunsang Kim Home appliance, home appliance diagnostic system, and method
JP2014032024A (ja) * 2012-08-01 2014-02-20 Fujitsu Ltd 故障診断支援装置、故障診断支援方法、および故障診断支援プログラム
US20140072125A1 (en) * 2012-09-07 2014-03-13 International Business Machines Corporation Acoustic diagnosis and correction system
US20140156032A1 (en) * 2012-11-30 2014-06-05 John Jenkins Equipment sound monitoring system and method

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB945777A (en) * 1961-11-02 1964-01-08 Austin Motor Co Ltd Improvements relating to gear noise measurement and the location of defective gear teeth
US6275806B1 (en) * 1999-08-31 2001-08-14 Andersen Consulting, Llp System method and article of manufacture for detecting emotion in voice signals by utilizing statistics for voice signal parameters
CA2393094C (en) * 2000-10-02 2009-04-07 Chubu Electric Power Co., Inc. Sound source locating system
JP4722347B2 (ja) * 2000-10-02 2011-07-13 中部電力株式会社 音源探査システム
CN1249412C (zh) * 2000-12-01 2006-04-05 大发工业株式会社 异常声音评估系统、声音记录设备以及异常声音评估设备
US20080091426A1 (en) * 2006-10-12 2008-04-17 Rod Rempel Adaptive context for automatic speech recognition systems
KR100969384B1 (ko) * 2008-09-26 2010-07-09 현대자동차주식회사 차량용 소음/진동 진단장치 및 그것의 운용방법
US9232910B2 (en) * 2008-11-17 2016-01-12 University Health Network Method and apparatus for monitoring breathing cycle by frequency analysis of an acoustic data stream
JP2011168354A (ja) * 2010-02-16 2011-09-01 Toshiba Corp 動作音収集装置および動作音収集方法
JP2012133250A (ja) * 2010-12-24 2012-07-12 Sony Corp 音情報表示装置、音情報表示方法およびプログラム
JP5930789B2 (ja) * 2012-03-23 2016-06-08 三菱電機株式会社 異常音診断装置
JP2013205449A (ja) * 2012-03-27 2013-10-07 Fuji Xerox Co Ltd 画像形成装置およびプログラム
CN104049868A (zh) * 2013-03-11 2014-09-17 联想(北京)有限公司 响应方法及电子设备
CN103632666B (zh) * 2013-11-14 2016-09-28 华为技术有限公司 语音识别方法、语音识别设备和电子设备

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006184722A (ja) * 2004-12-28 2006-07-13 Canon Inc 自己診断機能を備えた画像形成装置
WO2010044452A1 (ja) * 2008-10-16 2010-04-22 国立大学法人長崎大学 情報判定支援方法、音情報判定方法、音情報判定支援装置、音情報判定装置、音情報判定支援システム及びプログラム
JP2011146871A (ja) * 2010-01-13 2011-07-28 Hitachi Ltd 音源探索装置及び音源探索方法
JP2011203146A (ja) * 2010-03-26 2011-10-13 Fujitsu Fsas Inc 音の監視方法及びシステム
US20130060359A1 (en) * 2011-08-02 2013-03-07 Hyunsang Kim Home appliance, home appliance diagnostic system, and method
JP2014032024A (ja) * 2012-08-01 2014-02-20 Fujitsu Ltd 故障診断支援装置、故障診断支援方法、および故障診断支援プログラム
US20140072125A1 (en) * 2012-09-07 2014-03-13 International Business Machines Corporation Acoustic diagnosis and correction system
US20140156032A1 (en) * 2012-11-30 2014-06-05 John Jenkins Equipment sound monitoring system and method

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019207224A (ja) * 2018-05-29 2019-12-05 東芝産業機器システム株式会社 音響診断装置
JP7313895B2 (ja) 2018-05-29 2023-07-25 東芝産業機器システム株式会社 音響診断装置
CN113014735A (zh) * 2019-12-20 2021-06-22 东芝泰格有限公司 图像处理装置、信息处理方法以及记录介质
US11301181B2 (en) 2020-04-02 2022-04-12 Kyocera Document Solutions Inc. Diagnosing an image forming apparatus based on sound signal analysis
US11553094B2 (en) 2021-03-11 2023-01-10 Kyocera Document Solutions Inc. Electronic device capable of detecting occurrence of abnormal noise

Also Published As

Publication number Publication date
AU2016378005B2 (en) 2019-12-05
JP5939480B1 (ja) 2016-06-22
JP2017116473A (ja) 2017-06-29
CN108292509A (zh) 2018-07-17
AU2016378005A1 (en) 2018-05-10
CN108292509B (zh) 2022-03-25

Similar Documents

Publication Publication Date Title
WO2017110111A1 (ja) 端末装置、診断システム、診断方法およびプログラム
US10911607B2 (en) Diagnosing an image forming apparatus based on sound signal analysis
JP5954648B1 (ja) 端末装置、診断システム及びプログラム
US9992355B2 (en) Diagnostic apparatus, diagnostic system, and non-transitory computer readable medium
JP5954605B1 (ja) 診断装置、診断システムおよびプログラム
JP5954606B1 (ja) 診断装置、診断システム、装置およびプログラム
JP5954604B1 (ja) 診断装置、診断システムおよびプログラム
JP5943313B1 (ja) 診断装置、診断システムおよびプログラム
JP6840971B2 (ja) 診断装置、診断システムおよびプログラム
US20170185501A1 (en) Diagnostic device, diagnostic system, diagnostic method, and non-transitory computer-readable medium
WO2017094270A1 (ja) 診断装置、診断システム、診断方法およびプログラム
JP6016149B1 (ja) 端末装置、診断システム及びプログラム
JP6834223B2 (ja) 診断装置、診断システムおよびプログラム
JP6763255B2 (ja) 診断装置、診断システムおよびプログラム
JP6822036B2 (ja) 診断装置、診断システムおよびプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16878014

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016378005

Country of ref document: AU

Date of ref document: 20160506

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16878014

Country of ref document: EP

Kind code of ref document: A1