WO2015072338A1 - データ構造、ライブラリ作成装置、電子機器分析装置、ライブラリ提供システム - Google Patents

データ構造、ライブラリ作成装置、電子機器分析装置、ライブラリ提供システム Download PDF

Info

Publication number
WO2015072338A1
WO2015072338A1 PCT/JP2014/078896 JP2014078896W WO2015072338A1 WO 2015072338 A1 WO2015072338 A1 WO 2015072338A1 JP 2014078896 W JP2014078896 W JP 2014078896W WO 2015072338 A1 WO2015072338 A1 WO 2015072338A1
Authority
WO
WIPO (PCT)
Prior art keywords
component
substrate
data
type
library
Prior art date
Application number
PCT/JP2014/078896
Other languages
English (en)
French (fr)
Inventor
敦司 久野
貴子 大西
信治 杉田
Original Assignee
オムロン株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オムロン株式会社 filed Critical オムロン株式会社
Priority to EP14861853.1A priority Critical patent/EP3070460A4/en
Priority to US15/037,005 priority patent/US20160267443A1/en
Publication of WO2015072338A1 publication Critical patent/WO2015072338A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/30Administration of product recycling or disposal
    • CCHEMISTRY; METALLURGY
    • C22METALLURGY; FERROUS OR NON-FERROUS ALLOYS; TREATMENT OF ALLOYS OR NON-FERROUS METALS
    • C22BPRODUCTION AND REFINING OF METALS; PRETREATMENT OF RAW MATERIALS
    • C22B1/00Preliminary treatment of ores or scrap
    • C22B1/005Preliminary treatment of scrap
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2228Indexing structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B09DISPOSAL OF SOLID WASTE; RECLAMATION OF CONTAMINATED SOIL
    • B09BDISPOSAL OF SOLID WASTE NOT OTHERWISE PROVIDED FOR
    • B09B3/00Destroying solid waste or transforming solid waste into something useful or harmless
    • B09B3/80Destroying solid waste or transforming solid waste into something useful or harmless involving an extraction step
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/06Recognition of objects for industrial automation
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P10/00Technologies related to metal processing
    • Y02P10/20Recycling
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02WCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO WASTEWATER TREATMENT OR WASTE MANAGEMENT
    • Y02W30/00Technologies for solid waste management
    • Y02W30/50Reuse, recycling or recovery technologies
    • Y02W30/82Recycling of waste of electrical or electronic equipment [WEEE]
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02WCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO WASTEWATER TREATMENT OR WASTE MANAGEMENT
    • Y02W90/00Enabling technologies or technologies with a potential or indirect contribution to greenhouse gas [GHG] emissions mitigation

Definitions

  • the present invention relates to technology for efficiently recycling useful substances contained in electronic devices.
  • Patent Documents 1 to 3 exist as known technologies related to the recycling technology of electronic devices. However, these are products that are crushed, powdered or mixed and then extracted for reuse of useful resources by physical treatment or chemical treatment. In such a method, the cost for reutilization of useful resources becomes large, and it is very difficult to make the cost of recovering useful resources lower than the selling price of the useful resources extracted.
  • Patent Documents 4 and 5 propose a method of detecting the position of a part to be taken out and then cutting out the part from the product and taking it out.
  • the method of Patent Document 4 is to selectively cut out and process a part including a scarce resource, using the structure information of an HDD (Hard Disk Drive) whose structure is standardized.
  • the method of Patent Document 5 forms a transmission image of the target product using X-rays, measures the position of the motor from the transmission image, determines an appropriate cutting position, and cuts the target product. Is to take out.
  • these methods have low versatility, it is difficult to provide appropriate processing according to product types and product specifications for various types of products on the market.
  • JP, 2013-685 A JP, 2012-21218, A JP 2012-174770 A JP 2012-41575 A JP 2000-197870 A
  • the electronic device is designed by CAD, if it is possible to utilize this design data, the type and position of the component mounted on the electronic device can be easily understood, so the type of useful resource that can be recovered from the component You can know the amount.
  • the design data of the electronic device contains a lot of confidential information of the maker, it is rare for the maker to release the design data. As a result, a system that uses design data to detect the type and content of useful resources in electronic devices is not feasible.
  • the present invention has been made in view of the above-described circumstances, and is for detecting the type and amount of recyclable specific substances contained in electronic devices and components thereof by a simple method, and for efficiently collecting the specific substances.
  • the purpose is to provide technology.
  • the data structure according to claim 1 relates to a useful object which is an electronic device or a component of the electronic device containing a specific material that can be recyclable, the useful object used for object recognition by a computer for each type of useful object.
  • the characteristic data representing the feature of the present invention is associated with the contained material data representing the type and the amount of the specific material contained in the useful object.
  • a library having a data structure according to claim 1 (hereinafter referred to as "useful object library”) is used, for example, when a used electronic device or a component thereof is given, the electronic object is recognized by the computer The type of device or component can be identified (that is, which useful object is identified), and based on the recognition result, the specific substance that can be reused in the electronic device or the component can be identified. It can be easily determined whether the degree is included. Therefore, the information processing utilizing the useful object library can streamline the recovery processing of the specific substance from the electronic device and its components.
  • the component of the electronic device is an article that can be separated or disassembled from the electronic device, and corresponds to, for example, a component mounting board incorporated in the electronic device, an electronic component mounted on the component mounting board, and the like.
  • a useful object library for example, a combination of feature data and contained substance data of an electronic component for each type of electronic component (also referred to as “component library”), a feature of a component mounting board for each type of component mounting board Correspondence between data and content data of substrate (also referred to as “substrate library”), Characteristic data of electronic device and content data of electronic device for each type of electronic device (“Electronic device library” It can also be used.
  • the content data of the substrate may include data of the type and amount of the content of each component mounted on the substrate, or may include data of the total content of the content of all components mounted on the substrate. It may be The same applies to the contained substance data of the electronic device.
  • a plurality of types of libraries may be stored in the storage device, and data of electronic devices, component mounting boards, and electronic components may be mixed in the same library.
  • the data structure according to claim 2 is characterized in that the feature data includes data representing features extracted from image data of the useful object and / or image data of the useful object.
  • the feature data includes data representing features extracted from image data of the useful object and / or image data of the useful object.
  • image data of a useful object or data representing features of the image is registered in the useful object library as feature data, an image using an image obtained by photographing an electronic device or its component Application to recognition processing is facilitated.
  • the data structure according to claim 3 is characterized in that the image data is X-ray image data.
  • the image data is X-ray image data.
  • the data extracted from the X-ray image data and / or the X-ray image data is used as the feature data, a component which can not be visually recognized from the appearance like a component inside the electronic device Can be recognized, and can be applied to various objects.
  • a library creating apparatus is a library creating apparatus for creating a useful object library having the data structure according to any one of claims 1 to 3, and a measuring unit for measuring a registration target (D) creating feature data for identifying the registration target based on the measurement data obtained by the measurement unit, and including the substance data of the registration target given by the user with the created feature data as the useful object And an information processing unit registered in the library.
  • a registration target D
  • a library creation method is a library creation method for creating a useful object library having the data structure according to any one of claims 1 to 3, wherein the measuring unit measures the registration target object And the step of creating characteristic data for identifying the registration target based on the measurement data obtained by the measurement unit by the information processing unit; and the registration given by the user by the information processing unit And D. registering the created feature data together with the substance content data of the object in the useful object library. According to the configuration of claim 5, it is possible to easily create feature data and substance content data to be registered in the useful object library.
  • An electronic device analyzer is a storage device for storing a useful object library having the data structure according to any one of the first to third aspects, and the storage device for storing information obtained from an analysis object. And a recognition unit for specifying which useful object the analysis object corresponds to, compared with the feature data of each useful object in the useful object library stored in the library, and the corresponding useful based on the recognition result of the recognition unit And acquiring a substance content data of the object from the useful object library to determine a type and amount of a specific substance contained in the object to be analyzed. According to the configuration of the sixth aspect, it is possible to automatically determine how much the specific material that can be reused is included in the electronic device or the component thereof, so that the process of collecting and recycling the specific material. Can be performed efficiently.
  • An electronic device analysis apparatus is connectable to a system having a storage device storing a useful object library having the data structure according to any one of claims 1 to 3 through a network.
  • a recognition unit for identifying which useful object the analysis object corresponds to by comparing information obtained from the analysis object with feature data of each useful object in the useful object library acquired from the system;
  • a contained substance determination unit for determining the type and amount of a specific substance contained in the analyte by acquiring contained substance data of a corresponding useful object from the useful object library based on the recognition result of It is characterized by having.
  • it is possible to automatically determine how much the specific material that can be reused is included in the electronic device or the component thereof, so that the processing of recovery and recycling of the specific material is performed. Can be performed efficiently.
  • a library providing system comprising: a storage device for storing a useful object library having the data structure according to any one of the first to third aspects; and an electronic device analysis device connected via a network. And a data providing unit that provides the data of the useful object library stored in the storage device to the electronic device analysis device via a network according to the request of the above.
  • a service for providing a useful object library by a cloud can be easily realized.
  • the storage capacity on the electronic device analyzer side can be reduced by enabling the online use of the useful object library, and There is an advantage that the latest library can always be used without updating.
  • the electronic device analyzer associates, for each type of electronic component, component feature data representing a feature of the electronic component with contained material data representing the type and amount of a specific substance contained in the electronic component.
  • Storage unit storing a component library having the data structure, an imaging unit capturing an image of a target substrate which is a component mounting substrate of an analysis target, and acquiring image data, and an image of the target substrate obtained by the imaging unit
  • a component recognition unit that specifies the type of the electronic component mounted on the target substrate by comparing the feature of the data and the component characteristic data of each electronic component stored in the component library;
  • a contained substance determination unit that determines the type and amount of a specific substance contained in the target substrate from the recognition result and the contained substance data of each electronic component stored in the part library; Characterized in that it has.
  • the electronic device analyzer of the ninth aspect whether or not a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board can be automatically determined. Therefore, the recovery and recycling of the specific substance Process can be executed efficiently.
  • a storage device for storing a substrate library having a data structure in which mounting component data representing amounts and amounts are associated, an imaging unit for capturing an image of a target substrate which is a component mounting substrate of an analysis object and acquiring image data;
  • a substrate recognition unit that identifies the type of the target substrate by comparing the feature of the image data of the target substrate obtained by the imaging unit with the substrate feature data of each component mounting substrate stored in the substrate library;
  • the specific substance contained in the target substrate is obtained by acquiring the mounting component data of the corresponding component mounting substrate from the substrate library based on the recognition result of the substrate recognition unit. It characterized by having a a containing substance determination unit to determine the type and amount.
  • the electronic device analyzer it is possible to automatically determine whether or not a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board, so that the recovery and recycling of the specific substance Process can be executed efficiently. Further, by adopting a method of recognizing the substrate itself, simplification and speeding up of processing can be expected, and there is an advantage that accurate information of the substance contained in each component on the substrate can be acquired from the substrate library.
  • the electronic device analysis device includes, for each type of component mounting substrate, substrate feature data representing the feature of the component mounting substrate, an electronic component mounted on the component mounting substrate, and a type of a specific substance contained therein. And a board library having a data structure in which the data is associated with mounted part data representing the amount, and, for each type of electronic part, part feature data representing the feature of the electronic part and the type of specific substance contained in the electronic part
  • a storage device for storing a component library having a data structure in which the content material data representing the amount is associated; an imaging unit for imaging an object substrate which is a component mounting substrate of an analysis object; and acquiring image data; Comparing the features of the image data of the target substrate obtained by the processing unit with the substrate feature data of each of the component mounting boards stored in the substrate library; A board recognition unit that specifies the type of board, and when recognition of the target substrate by the board recognition unit fails, the feature data of the target substrate obtained by the imaging unit and the part library are stored in the component library
  • a component recognition unit specifies the type of the
  • the electronic device analyzer of claim 11 it is possible to automatically determine whether or not a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board, so that the recovery and recycling of the specific substance Process can be executed efficiently. Also, by performing substrate recognition, which is a relatively light process, first and performing component recognition as an aid when recognition on a substrate basis is difficult, the recognition rate of the substrate can be improved, and overall There is an advantage that processing efficiency can be improved.
  • the electronic device analyzer associates, for each type of electronic component, component feature data representing a feature of the electronic component with contained material data representing the type and amount of a specific substance contained in the electronic component.
  • Component library having the above data structure, and a data structure in which, for each type of component mounting board, electronic components mounted on the component mounting board are associated with mounting component data representing the type and amount of the specific substance contained therein.
  • a storage device storing the substrate library, an imaging unit capturing an image of a target substrate which is a component mounting substrate of an analysis object, and acquiring image data; and a feature of image data of the target substrate obtained by the imaging unit Component recognition that identifies the type of electronic component mounted on the target substrate by comparing component feature data of each electronic component stored in the component library And a substrate recognition unit for identifying the type of the target substrate by comparing the recognition result of the component recognition unit with the mounted component data of each component mounting substrate stored in the substrate library; Having a contained substance determination unit that determines the type and amount of a specific substance contained in the target substrate by acquiring mounting component data of the corresponding component mounting substrate from the substrate library based on the recognition result It features.
  • the electronic device analysis device of the twelfth aspect whether or not a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board can be automatically determined. Therefore, the recovery and recycling of the specific substance Process can be executed efficiently.
  • the substrate is specified based on the result of component recognition and the information of each component is acquired from the substrate library, it is not necessary to recognize all the components from the image of the object to be analyzed with high accuracy. Simplification and speeding up can be achieved. In addition, accurate information on the content of each component on the substrate can be obtained.
  • a board library having a data structure in which the data is associated with mounted part data representing the amount, and, for each type of electronic part, part feature data representing the feature of the electronic part and the type of specific substance contained in the electronic part
  • a storage device for storing a component library having a data structure in which content data representing a quantity are associated; an imaging unit for capturing an image of a target substrate which is a component mounting substrate of an analysis target; A pre-sensing unit that measures a substrate more simply than the imaging unit and obtains sensing data of the target substrate, and a front obtained by the pre-sensing unit
  • a board recognition unit for identifying the type of the target substrate by comparing the feature of sensing data of the target substrate with the substrate feature data of each component mounting board stored in the substrate library, and the imaging unit
  • a component recognition unit that identifies
  • a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board can be automatically determined, so recovery and recycling of the specific substance can be performed. Process can be executed efficiently.
  • the necessity of photographing and component recognition by the imaging unit is determined according to the result of pre-sensing, there is an advantage that the processing efficiency as a whole can be improved.
  • the electronic device analysis device includes, for each type of component mounting substrate, substrate feature data representing the feature of the component mounting substrate, an electronic component mounted on the component mounting substrate, and a type of a specific substance contained therein. And a board library having a data structure in which the data is associated with mounted part data representing the amount, and, for each type of electronic part, part feature data representing the feature of the electronic part and the type of specific substance contained in the electronic part
  • a storage device for storing a component library having a data structure in which content data representing a quantity are associated; an imaging unit for capturing an image of a target substrate which is a component mounting substrate of an analysis target; A pre-sensing unit that measures a substrate more simply than the imaging unit and obtains sensing data of the target substrate, and a front obtained by the pre-sensing unit
  • a board recognition unit for identifying the type of the target substrate by comparing the feature of sensing data of the target substrate with the substrate feature data of each component mounting board stored in the substrate library, and the imaging unit
  • the electronic device analyzer of claim 14 it is possible to automatically determine whether or not a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board, and therefore the recovery and recycling of the specific substance Process can be executed efficiently. Further, since the imaging condition by the imaging unit is adjusted according to the result of the pre-sensing, it is possible to perform imaging optimal for component recognition, and it is possible to expect an improvement in recognition rate and improvement in processing efficiency.
  • a specific substance such as a noble metal or a rare metal
  • the electronic device analyzer associates, for each type of electronic component, component feature data representing the feature of the electronic component with contained material data representing the type and amount of the specific substance contained in the electronic component. It is possible to connect with a system storing a component library having the above data structure via a network, capture an image of a target substrate which is a component mounting substrate of an analysis object, and obtain image data; Component recognition unit for identifying the type of electronic component mounted on the target substrate by comparing the feature of the image data of the target substrate with the component feature data of each electronic component stored in the component library And the species of the specific substance contained in the target substrate from the recognition results of the part recognition unit and the substance content data of each electronic part stored in the part library. And characterized by having a, a containing substance determination unit to determine the amount.
  • a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board can be automatically determined, so that the recovery and recycling of the specific substance Process can be executed efficiently.
  • the electronic device analysis device includes, for each type of component mounting substrate, substrate feature data representing the feature of the component mounting substrate, an electronic component mounted on the component mounting substrate, and a type of a specific substance contained therein.
  • substrate feature data representing the feature of the component mounting substrate
  • an electronic component mounted on the component mounting substrate and a type of a specific substance contained therein.
  • the type of the target substrate is determined by comparing the imaging unit to be acquired, the feature of the image data of the target substrate obtained by the imaging unit, and the substrate feature data of each component mounting substrate stored in the substrate library.
  • the electronic device analyzer of the sixteenth aspect whether or not a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board can be automatically determined, so that the recovery and recycling of the specific substance Process can be executed efficiently. Further, by adopting a method of recognizing the substrate itself, simplification and speeding up of processing can be expected, and there is an advantage that accurate information of the substance contained in each component on the substrate can be acquired from the substrate library.
  • the electronic device analysis device includes, for each type of component mounting substrate, substrate feature data representing a feature of the component mounting substrate, an electronic component mounted on the component mounting substrate, and a type of a specific substance contained therein. And a board library having a data structure in which the data is associated with mounted part data representing the amount, and, for each type of electronic part, part feature data representing the feature of the electronic part and the type of specific substance contained in the electronic part It can be connected via a network with a system that stores a component library that has a data structure in which it is associated with contained substance data representing quantities, through a network, and images a target substrate that is a component mounting board of an analysis target.
  • An imaging unit to be acquired, a feature of image data of the target substrate obtained by the imaging unit, and a component mounting substrate stored in the substrate library An image of the target substrate obtained by the imaging unit when a substrate recognition unit that identifies the type of the target substrate by comparing the plate feature data and recognition of the target substrate by the substrate recognition unit fails
  • the type of the target substrate is specified by comparing the feature of the data with the component feature data of each electronic component stored in the component library to specify the type of the electronic component mounted on the target substrate.
  • a contained substance determination unit that determines the type and amount.
  • a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board can be automatically determined, so that the recovery and recycling of the specific substance Process can be executed efficiently. Also, by performing substrate recognition, which is a relatively light process, first and performing component recognition as an aid when recognition on a substrate basis is difficult, the recognition rate of the substrate can be improved, and overall There is an advantage that processing efficiency can be improved.
  • the electronic device analyzer associates, for each type of electronic component, component feature data representing a feature of the electronic component with contained material data representing the type and amount of a specific substance contained in the electronic component.
  • Component library having the above data structure, and a data structure in which, for each type of component mounting board, electronic components mounted on the component mounting board are associated with mounting component data representing the type and amount of the specific substance contained therein.
  • An imaging unit that can be connected via a network with a system storing the substrate library, and that captures an image of a target substrate that is a component mounting substrate of an analysis object, and acquires image data;
  • the feature of the image data of the target substrate and the component feature data of each electronic component stored in the component library are compared with each other and mounted on the target substrate
  • the type of target substrate is specified by comparing the component recognition unit for specifying the type of electronic component, the recognition result of the component recognition unit, and the mounting component data of each component mounting board stored in the board library.
  • the type and amount of the specific substance contained in the target substrate are determined by acquiring mounting component data of the component mounting substrate from the substrate library based on the recognition result of the substrate recognition unit and the substrate recognition unit. And a contained material determination unit.
  • the electronic device analysis device of the eighteenth aspect whether or not a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board can be automatically determined, so that the recovery and recycling of the specific substance Process can be executed efficiently.
  • the substrate is specified based on the result of component recognition and the information of each component is acquired from the substrate library, it is not necessary to recognize all the components from the image of the object to be analyzed with high accuracy. Simplification and speeding up can be achieved.
  • accurate information on the content of each component on the substrate can be obtained.
  • the electronic device analysis device includes, for each type of component mounting substrate, substrate feature data representing the feature of the component mounting substrate, an electronic component mounted on the component mounting substrate, and a type of a specific substance contained therein. And a board library having a data structure in which the data is associated with mounted part data representing the amount, and, for each type of electronic part, part feature data representing the feature of the electronic part and the type of specific substance contained in the electronic part It can be connected via a network with a system that stores a component library that has a data structure in which it is associated with contained substance data representing quantities, through a network, and images a target substrate that is a component mounting board of an analysis target.
  • Substrate recognition for specifying the type of the target substrate by comparing the feature of the sensing data of the target substrate obtained by the pre-sensing unit with the substrate feature data of each component mounting substrate stored in the substrate library Component, the feature of the image data of the target substrate obtained by the imaging unit, and the component feature data of each electronic component stored in the component library, and the electronic component mounted on the target substrate
  • Containing substance to determine the type and amount of specific substance contained in the target substrate by acquiring the contained substance data of the corresponding mounting part from the library Has a tough and, in response to said board recognition unit and the target substrate recognition result by, characterized in that to determine
  • the electronic device analyzer of the nineteenth aspect whether or not a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board can be automatically determined, and therefore the recovery and recycling of the specific substance Process can be executed efficiently.
  • a specific substance such as a noble metal or a rare metal
  • the necessity of photographing and component recognition by the imaging unit is determined according to the result of pre-sensing, there is an advantage that the processing efficiency as a whole can be improved.
  • the electronic device analysis device is, for each type of component mounting substrate, substrate feature data representing the feature of the component mounting substrate, an electronic component mounted on the component mounting substrate, and a type of a specific substance contained therein.
  • a board library having a data structure in which the data is associated with mounted part data representing the amount, and, for each type of electronic part, part feature data representing the feature of the electronic part and the type of specific substance contained in the electronic part It can be connected via a network with a system that stores a component library that has a data structure in which it is associated with contained substance data representing quantities, through a network, and images a target substrate that is a component mounting board of an analysis target.
  • Substrate recognition for specifying the type of the target substrate by comparing the feature of the sensing data of the target substrate obtained by the pre-sensing unit with the substrate feature data of each component mounting substrate stored in the substrate library Component, the feature of the image data of the target substrate obtained by the imaging unit, and the component feature data of each electronic component stored in the component library, and the electronic component mounted on the target substrate
  • a component recognition unit for specifying the type of the object, and mounting component data of the corresponding component mounting board from the substrate library based on the recognition result of the substrate recognition unit, or the component based on the recognition result of the component recognition unit Containing substance to determine the type and amount of specific substance contained in the target substrate by acquiring the contained substance data of the corresponding mounting part from the library It has a tough and, on the basis of the pre-sensing data, and determining the photographing condition of
  • a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board can be determined automatically, so that the recovery and recycling of the specific substance can be performed. Process can be executed efficiently. Further, since the imaging condition by the imaging unit is adjusted according to the result of the pre-sensing, it is possible to perform imaging optimal for component recognition, and it is possible to expect an improvement in recognition rate and improvement in processing efficiency.
  • the electronic device analyzer according to claim 21 is the electronic device analyzer according to any one of claims 9 to 20, wherein the imaging unit acquires an X-ray image of the target substrate. It is characterized by being.
  • a component which can not be visually recognized from the external appearance such as a component inside the electronic device, a component of the multilayer substrate, and a component mounted on the back surface. Can be recognized, and can be applied to various objects.
  • the electronic device analyzer according to claim 22 is the electronic device analyzer according to any one of claims 9 to 20, wherein the contained substance determination unit determines the type of the specific substance contained in the target substrate. And data of the position on the substrate of the part including the specific substance.
  • the electronic device analyzer of the twenty-second aspect by utilizing such data in the subsequent recovery step, it is possible to expect improvement in efficiency of recovery operation and reduction in recovery cost.
  • An electronic device analyzer is the electronic device analyzer according to the twenty-second aspect, wherein the information on the type and amount of the specific substance contained in the target substrate, which is output by the contained substance determination unit
  • the method further includes a specific substance extraction method determination unit that generates data defining a method of taking out the specific substance from the target substrate based on data including information on the position on the substrate of the part including the specific substance. It is characterized by
  • the electronic device analyzer of the twenty-third aspect by utilizing such data in the subsequent recovery step, it is possible to expect improvement in efficiency of recovery operation and reduction in recovery cost.
  • the electronic device analysis device in the electronic device analysis device according to any one of the tenth to fourteenth and sixteenth to twentieth aspects, for each type of component mounting board, among the component mounting boards A specific substance for acquiring extraction method definition data of a corresponding component mounting board based on the recognition result of the board recognition unit from a specific substance information library having a data structure in which extraction method definition data defining a method of extracting a specific substance is associated. And an extraction method determination unit.
  • the electronic device analyzer pertaining to the twenty-fourth aspect, by utilizing such data in the subsequent recovery step, it is possible to expect improvement in efficiency of recovery operation and reduction in recovery cost.
  • the type and amount of a specific substance contained in an electronic device or a component mounting board can be detected by a simple method, and recovery of the specific substance can be made efficient.
  • FIG. 2 is a block diagram showing the main functional configuration of the analyzer of the first embodiment.
  • 6 is a flowchart showing the flow of analysis processing by the analyzer of the first embodiment.
  • FIG. 7 is a block diagram showing the main functional configuration of an analyzer of a second embodiment. The flowchart which shows the flow of the analysis process by the analyzer of 2nd Embodiment.
  • the block diagram which shows the main function structure of the analyzer of 3rd Embodiment.
  • the flowchart which shows the flow of the analysis process by the analyzer of 3rd Embodiment.
  • the flowchart which shows the flow of the analysis process by the analyzer of 4th Embodiment. A figure explaining a library creation device of a 5th embodiment.
  • (A) is a figure which shows an example of the data structure of a components library
  • (b) is a figure which shows an example of the data structure of a board
  • FIG. 1 is a diagram schematically showing the appearance and operation of an electronic device analyzer (also referred to as “analyzer”)
  • FIG. 2 is a functional block diagram showing the main functional configuration of the analyzer.
  • the analysis apparatus 1 is generally composed of an imaging unit 10 and an information processing unit 11.
  • the imaging unit 10 is a device that captures an analysis object 13 (such as an electronic device or a component mounting board) transported by a transport device 12 such as a belt conveyor and outputs the image data to the information processing unit 11.
  • the information processing unit 11 recognizes (specifies) a mounted part or a substrate from the image data of the analysis object 13 input from the imaging unit 10, and based on the recognition result, a specific substance (for example, , And useful equipment such as precious metals and rare metals.
  • an X-ray imaging unit that captures a two-dimensional transmission X-ray image is used as the imaging unit 10.
  • the imaging unit 10 includes an X-ray generator 100 that irradiates the analysis target 13 with X-rays, an X-ray detector 101 that detects X-rays transmitted through the analysis target 13, and an image generation unit 102. It consists of In the present embodiment, using the line sensor X-ray detector 101 in which a large number of detection elements are arranged in the main scanning direction, detection of the transmitted dose is continued while the analysis object 13 is conveyed by the conveyance device 12 in the subscanning direction.
  • the image generation unit 102 is a function of performing pre-processing (correction of density and contrast, noise removal, trimming of the area of the object to be analyzed 13, image rotation, etc.) as necessary in addition to generation of two-dimensional image data. .
  • the function of the image generation unit 102 may be provided in the information processing unit 11.
  • the configuration of the imaging unit 10 is not limited to this.
  • an X-ray detector 101 in which detection elements are arranged in a two-dimensional array may be used.
  • an X-ray imaging apparatus capable of acquiring an X-ray tomographic image such as tomosynthesis or CT (computer tomography) may be used (see, for example, Japanese Patent No. 5263204 for a detailed configuration of these X-ray imaging apparatuses).
  • a visible light imaging apparatus such as a CCD camera, an infrared imaging apparatus, other sensors, or the like may be used.
  • the information processing unit 11 has functions of a component library 110, a component recognition unit 111, a contained substance determination unit 112, and the like, as shown in FIG.
  • the information processing unit 11 is typically a computer provided with a CPU (central processing unit), a RAM (main storage device), an auxiliary storage device such as a magnetic disk or a semiconductor disk, an input device, a display device, a communication IF, and the like. It can be configured. In that case, each function of the information processing unit 11 is realized by the CPU reading and executing a program stored in a storage device such as an auxiliary storage device.
  • the configuration of the information processing unit 11 may be a client-server scheme, grid computing, cloud computing, or the like, as well as a scheme realized by one computer. Alternatively, all or part of the functions of the information processing unit 11 can be configured using a logic circuit such as an ASIC or an FPGA or an on-board computer.
  • the component library 110 is a database that stores “component data” that is information on electronic components. Component data of many types of electronic components are registered in the component library 110 in advance.
  • the component library 110 may be stored in a local storage such as an auxiliary storage device, may be stored in a storage on a network such as a server or a cloud, or may be distributed to a plurality of storages.
  • part data includes at least “part ID”, “part characteristic data”, and "containing substance data”.
  • the “part ID” is identification information for uniquely identifying a part.
  • the analyzer 1 or the user may assign a part ID to each part, or the maker / model number of the part may be used as the part ID.
  • Part feature data is model data of a part used for image recognition, and may be any type of information as long as it represents the feature of the part. For example, image data of a part itself, various feature amounts extracted from the image data, or the like can be used as part feature data.
  • a plurality of image data (images with different imaging methods such as X-ray images and visible light images, images with different resolutions, images subjected to different image processing, etc.) may be registered for one component, A kind of part feature data may be registered.
  • image data of the JPEG format and data of feature amounts extracted from the image data are registered as part feature data.
  • feature amounts there are various feature amounts that can be extracted from image data. For example, it is significant for identification (identification) of parts by image recognition such as part size, shape, number, shape, size, arrangement of solder, number, shape, size, arrangement of electrodes, characteristics of shading or texture, edge feature, etc. Any feature amount may be used.
  • “Contained substance data” is information such as the type and amount of a specific substance contained in (or recoverable from) the part.
  • Specific materials include, for example, noble metals such as gold, silver and platinum, and rare metals such as palladium and cobalt. As long as it is a useful material that can be recovered from parts and reused, materials other than noble metals and rare metals may be used.
  • the component recognition unit 111 has a function of recognizing (specifying) an electronic component mounted on the substrate from the image data of the substrate of the analysis object 13 input from the imaging unit 10, and the contained substance determination unit 112 It is a function to determine the type, the content and the like of the specific substance contained in the analysis object 13 based on the recognition result of the recognition unit 111.
  • the details of these functions will be described along with the flow of the operation of the analyzer 1.
  • FIG. 3 is a flowchart showing the flow of analysis processing by the analyzer 1.
  • the imaging unit 10 captures an X-ray image of a component mounting board built in the electronic device which is the analysis object 13, and the image data is taken into the information processing unit 11 (step S30).
  • FIG. 4A shows an example of the transmission X-ray image 40 of the component mounting board. Since the X-ray dose to be transmitted varies depending on the material and thickness of the parts on the substrate, not only can the outline of each part be observed by shading of the image, but particularly metal parts with high X-ray absorptance Can be observed as a clear image.
  • the component recognition unit 111 detects the region of the component from the image 40 of the entire substrate (step S31).
  • any detection algorithm may be used, such as a method of detecting a region likely to be a part by pattern matching, and a method of extracting a region of similar density (pixel value) by binarization or clustering.
  • FIG. 4 (b) is an example showing the detected part area in an enlarged manner.
  • a component recognition process is performed on each of the component areas detected in step S31.
  • the component recognition unit 111 selects a component region of interest and performs binarization processing (step S32).
  • the result of binarizing the part area of FIG. 4 (b) is shown in FIG. 4 (c).
  • the component recognition unit 111 extracts the feature of the solder from the binary image (step S33).
  • the number, shape, size (area, diameter, width, etc.), arrangement, etc. of the solder may be used as a feature of the solder.
  • the outline of the part 41 is shown by a broken line in FIG. 4C, the broken line is a virtual auxiliary line shown for the convenience of description, and a line which does not exist in an actual binary image. (The same applies to the broken lines in FIG. 4 (d) to FIG. 4 (f)).
  • the component 41 of FIG. 4C is a component of a BGA (Ball Grid Array) package, and in this type, a large number of ball-shaped (circular) solders 41 a are arranged at a narrow pitch on the back surface of the component.
  • FIG. 4 (d) to FIG. 4 (f) show solders of other package type parts.
  • chip components 42 such as resistors and capacitors
  • wedge-shaped solders 42a are present at both ends of the components
  • lead components 43 relatively narrow solders 43a are present at each lead portion.
  • a component 44 of LGA (Land Grid Array) type a large number of rectangular solders 44 a are arranged on the back surface of the component 44.
  • the part recognition unit 111 refers to the part library 110, compares the solder feature of the part feature data of each registered part with the solder feature extracted from the part region of the X-ray image, and determines the similarity (coincidence) of the solder feature.
  • the part is identified by evaluating (step S34).
  • evaluating step S34
  • various methods used in general image recognition can be used, so a detailed explanation will be omitted here.
  • the subsequent processing may be skipped for the part area.
  • the contained material determination unit 112 reads the component ID of the component and the contained material data from the component library 110, and adds it to the contained material list (step S35).
  • the contained substance list is data in which the types and amounts of (recoverable) specific substances contained in the electronic components mounted on the substrate are recorded.
  • FIG. 5A is an example of the contained substance list, and a part ID and contained substance data are described for each of the specified parts.
  • the form of the contained substance list is not limited to this, as shown in FIG. 5 (b), the form in which the number of parts and contained substance data are described for each part ID, as shown in FIG. 5 (c).
  • the format that also describes the position information of the part (coordinate values of the upper left and lower right vertices of the part area, etc.), and as shown in Fig. 5 (d), the content for each type of specific substance (cumulative value of all parts It may be any format such as a format for describing).
  • the contained substance determination unit 112 After repeating the processes of steps S32 to S35 for all parts of the analysis object 13, the contained substance determination unit 112 outputs the contained substance list, and the analysis process is ended (step S36).
  • the data of the contained substance list created in this way is used in the subsequent steps. For example, based on the presence or absence (or more or less of the content) of the contained substance, it is possible to select whether to send / discard to the recovery step or sort which sent to the recovery step based on the type of contained substance. .
  • by controlling the cutting machine based on the position information of the part containing the specific substance it is possible to automatically take out only the necessary part from the electronic device and the part mounting substrate. In particular, in the case of a large substrate whose integration degree is not very high, significant efficiency improvement of the recovery processing can be expected by taking out only valuable parts by such a method.
  • the analyzer it is possible to automatically determine whether a specific substance such as noble metal or rare metal is contained in an electronic device or a component mounting board, so that the processing of recovery and recycling of the specific substance can be performed efficiently.
  • a specific substance such as noble metal or rare metal
  • X-ray images it is possible to recognize parts that can not be visually recognized from the appearance, such as parts inside electronic devices, parts of multilayer substrates, and parts mounted on the back side, and various objects Application to is possible.
  • the feature of the solder which becomes a clear image in the X-ray image is used for component recognition, sufficient recognition accuracy can be obtained by relatively simple processing.
  • the parts are specified by evaluating the similarity of the solder features, but, for example, the correlation coefficient or the difference image between the image of the registered part and the image of the part extracted from the analysis object It is also preferable to evaluate the similarity between images by calculating.
  • the processing may be speeded up by using a low resolution image or dividing the image into small blocks.
  • the substrate is the object of recognition in the second embodiment.
  • the configuration specific to the second embodiment will be mainly described below, and the description of the configuration common to the first embodiment will be omitted.
  • FIG. 6 shows a functional configuration of the information processing unit of the second embodiment.
  • the information processing unit 60 has functions of a substrate library 600, a substrate recognition unit 601, a contained substance determination unit 602, and the like.
  • the substrate library 600 is a database that stores “substrate data” which is information on a component mounting substrate. Substrate data of a large number of component mounting substrates is registered in the substrate library 600 in advance.
  • substrate library 600 may be stored on local storage like the component library of 1st Embodiment, may be stored on the storage on a network, and may be disperse
  • the "substrate data” includes “substrate ID”, “substrate feature data”, and "mounted component data”.
  • the “substrate ID” is identification information for uniquely identifying a substrate.
  • the analyzer or the user may assign the substrate ID to each substrate, or the manufacturer / model number of the substrate may be used as the substrate ID.
  • the “substrate feature data” is model data of a substrate used for image recognition, and may be any type of information as long as it represents the features of the substrate. For example, image data of a substrate, various feature amounts extracted from the image data, and the like can be used as substrate feature data.
  • a plurality of image data may be registered for one substrate, or more than one.
  • Various types of substrate feature data may be registered.
  • image data of the JPEG format and data of a feature amount extracted from the image data are registered as substrate feature data.
  • any feature quantities may be used as long as they are significant in identifying (identifying) a substrate by image recognition, such as part layout, features of shading and texture, edge features, and histograms.
  • “Mounted component data” is data describing the type of electronic component mounted on the substrate, the position on the substrate, the type and amount of a specific substance contained in the electronic component (which can be recovered), etc. It is possible to use data in the same format as the inclusion substance list shown in FIG. 5 (c). If the position information of the component is not used in the subsequent processing, the mounted component data may include at least the type of the mounted component (component ID and the like) and the information of the specific substance contained.
  • FIG. 7 is a flow chart showing the flow of analysis processing of the second embodiment.
  • an X-ray image of a component mounting board which is the analysis object 13 is imaged by the imaging unit 10, and the image data is taken into the information processing unit 60 (step S70).
  • An example of a transmission X-ray image of the component mounting board is shown in FIG. Since the X-ray dose to be transmitted varies depending on the material and thickness of the parts on the substrate, not only can the outline of each part be observed by shading of the image, but particularly metal parts with high X-ray absorptance Can be observed as a clear image.
  • the substrate recognition unit 601 extracts the feature amount of the substrate from the X-ray image of the analysis object (step S71).
  • the feature quantities of the substrate as described above, various things such as the layout of parts, features of shading and texture, edge features, and a histogram can be used.
  • the substrate recognition unit 601 refers to the substrate library 600, compares the substrate feature data of each registered substrate with the feature quantity extracted from the X-ray image of the analysis object, and determines the similarity of the feature quantity (coincidence
  • the substrate is specified by evaluating (1) (step S72).
  • the calculation formula of the degree of similarity and the evaluation algorithm various methods used in general image recognition can be used, so a detailed explanation will be omitted here.
  • the subsequent processing may be skipped. Good.
  • the substrate is specified by evaluating the similarity of feature amounts, but, for example, the correlation coefficient or the difference image between the image of the registration substrate and the image of the object to be analyzed is calculated. It is also preferable to evaluate the similarity between images.
  • the processing may be speeded up by using a low resolution image or dividing the image into small blocks.
  • the contained substance determination unit 602 reads the substrate ID of the substrate and the mounted component data from the substrate library 600. Then, the contained substance list as illustrated in FIGS. 5A to 5D is generated, the substrate ID and the contained substance list are output as the analysis result, and the processing is ended (step S73).
  • a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board. It is possible to execute the process of recycling efficiently.
  • X-ray images since X-ray images are used, it is possible to recognize parts that can not be visually recognized from the appearance, such as parts inside electronic devices, parts of multilayer substrates, and parts mounted on the back side, and various objects Application to is possible.
  • by adopting a method of recognizing the substrate itself simplification and speeding up of processing can be expected, and there is an advantage that accurate information on the content and position of each component on the substrate can be acquired from the substrate library 600. .
  • the third embodiment is configured to improve the recognition rate by combining board recognition and part recognition.
  • the configuration specific to the third embodiment will be mainly described, and the description of the configuration common to the above embodiments will be omitted.
  • FIG. 8 shows a functional configuration of the information processing unit of the third embodiment.
  • the information processing unit 80 has functions of a substrate library 800, a substrate recognition unit 801, a component library 802, a component recognition unit 803, a contained material determination unit 804, and the like.
  • the data stored in the substrate library 800 and the component library 802 are the same as those described in the above embodiments.
  • FIG. 9 is a flowchart showing the flow of analysis processing of the third embodiment.
  • an X-ray image of a component mounting board which is an analysis object is captured by the imaging unit 10, and the image data is taken into the information processing unit 80 (step S90).
  • the substrate recognition unit 801 extracts the feature amount of the substrate from the X-ray image of the analysis object (step S91).
  • the substrate recognition unit 801 compares the substrate feature data of each registered substrate with the feature quantity extracted from the X-ray image of the analysis object with reference to the substrate library 800, and the similarity of the feature quantity (coincidence) To identify the substrate (step S92).
  • the processing so far is the same as steps S70 to S72 of FIG. 7 of the second embodiment.
  • the substrate recognition unit 801 branches the process depending on whether or not the recognition of the substrate which is the analysis target is successful (step S93). Regarding the success or failure of recognition, for example, when only one registration board whose similarity exceeds a predetermined threshold is detected, it is judged as recognition success, and there is no registration board whose similarity exceeds a predetermined threshold, or similar If there are a plurality of registered substrates having the same degree (that is, if one substrate can not be narrowed), it may be determined that the recognition is unsuccessful.
  • the substrate recognition unit 801 selects, from the substrate library 800, several registration substrates which may be the same substrate as the object to be analyzed as candidate substrates. It chooses (step S94). For example, the N candidate substrates may be selected in order from the one with the highest degree of similarity calculated in step S92, or all those with the degree of similarity exceeding a certain criterion may be selected as the candidate substrates.
  • the substrate recognition unit 801 creates a candidate substrate ID list describing the substrate ID of each of the selected candidate substrates, and delivers the candidate substrate ID list to the component recognition unit 803.
  • the component recognition unit 803 applies component recognition processing to the X-ray image of the component mounting board, and specifies each component mounted on the board as an analysis object (step S95).
  • the contents of the part recognition process are the same as those described in steps S31 to S35 in FIG. 3 of the first embodiment, and thus the description thereof will be omitted.
  • step S95 it is not necessary to identify all the components on the substrate, and only some main components (for example, components of large size, components of a package of BGA or LGA, etc.) may be identified.
  • the component recognition unit 803 narrows down the substrate including the component group identified in step S95 out of the plurality of candidate substrates included in the candidate substrate ID list (step S96).
  • step S96 the analysis target is determined to be an unknown substrate, and the subsequent processing is skipped.
  • the contained substance determination unit 804 reads the substrate ID of the substrate and the mounted component data from the substrate library 800. Then, the contained substance list as illustrated in FIGS. 5A to 5D is generated, the substrate ID and the contained substance list are output as an analysis result, and the processing is ended (step S97).
  • a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board. It is possible to execute the process of recycling efficiently.
  • X-ray images since X-ray images are used, it is possible to recognize parts that can not be visually recognized from the appearance, such as parts inside electronic devices, parts of multilayer substrates, and parts mounted on the back side, and various objects Application to is possible.
  • substrate recognition which is a relatively light process, is performed first, and component recognition is performed supplementary when recognition on a substrate-by-substrate basis is difficult, so that the substrate recognition rate can be improved. There is an advantage that the processing efficiency as a whole can be improved.
  • the fourth embodiment is configured to identify a substrate using the result of component recognition.
  • the configuration specific to the fourth embodiment will be mainly described, and the description of the configuration common to the above embodiments will be omitted.
  • FIG. 10 shows a functional configuration of the information processing unit of the fourth embodiment.
  • the information processing unit 1010 has functions of a component library 1000, a component recognition unit 1001, a substrate library 1002, a substrate recognition unit 1003, a contained material determination unit 1004, and the like.
  • the data stored in the component library 1000 and the substrate library 1002 are the same as those described in the above embodiments. However, when the substrate recognition unit 1003 does not use the substrate feature data, the substrate feature data may not be stored in the substrate library 1002.
  • FIG. 11 is a flow chart showing the flow of analysis processing of the fourth embodiment.
  • step S110 an X-ray image of a component mounting board which is an analysis object is captured by the imaging unit 10, and the image data is taken into the information processing unit 1010 (step S110).
  • the component recognition unit 1001 applies component recognition processing to the X-ray image of the analysis target, and specifies each component mounted on the substrate that is the analysis target (step S111).
  • the contents of the part recognition process are the same as those described in steps S31 to S35 in FIG. 3 of the first embodiment, and thus the description thereof will be omitted.
  • step S111 it is not necessary to identify all the components on the substrate, and only some main components (for example, components of large size, components of a package of BGA or LGA, etc.) may be identified.
  • the component recognition unit 1001 creates a component ID list describing the component ID of each of the specified components, and delivers the component ID list to the substrate recognition unit 1003 (step S112).
  • the substrate recognition unit 1003 refers to the substrate library 1002 and narrows down the substrates including the component group described in the component ID list from among the registered substrates (step S113). If there are a plurality of registered substrates including a component group described in the component ID list, the substrate recognition unit 1003 may narrow down to one substrate by comparing the image data of the substrates and the feature quantities thereof. .
  • the specific method is as described in the second embodiment. If no corresponding substrate is found in the registered substrate, that is, if the object to be analyzed is an unknown substrate, the subsequent processing is skipped.
  • the contained substance determination unit 1004 reads the substrate ID of the substrate and the mounted component data from the substrate library 1002. Then, the content list as illustrated in FIGS. 5A to 5D is generated, the substrate ID and the content list are output as an analysis result, and the processing is ended (step S114).
  • a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board. It is possible to execute the process of recycling efficiently.
  • X-ray images are used, it is possible to recognize parts that can not be visually recognized from the appearance, such as parts inside electronic devices, parts of multilayer substrates, and parts mounted on the back side, and various objects Application to is possible.
  • the substrate is specified based on the result of component recognition and information on the content and position of each component is acquired from the substrate library, it is necessary to recognize all components from the image of the object with high accuracy. Processing can be simplified and speeded up. In addition, accurate information on the content and position of each part on the substrate can be obtained.
  • FIG. 12 is a diagram for explaining a library creation apparatus that creates component data and substrate data and registers the component data and substrate data in the library.
  • the library apparatus is roughly composed of a measuring unit 120 and an information processing unit 121.
  • This library apparatus can be an apparatus different from the above-described analyzer, or can be implemented as one function of the analyzer.
  • the measuring unit 120 is a device that measures a registration target object 126 (electronic device, component mounting board, etc.), and outputs measurement data obtained from the registration target object 126 to the information processing unit 121.
  • a registration target object 126 electronic device, component mounting board, etc.
  • an X-ray imaging unit 120a for imaging a transmission X-ray image a visible light imaging unit 120b for imaging a visible light image (appearance), and shape measurement for measuring a three-dimensional shape of a substrate or component And the like.
  • shape measurement unit 120c various devices can be used, such as a device that measures the surface shape using a special pattern illumination, a device that measures the surface shape with a laser displacement meter, and the like.
  • an X-ray tomographic imaging apparatus such as tomosynthesis or CT may be used as the measurement unit 120.
  • the information processing unit 121 has functions of an interactive board data registration unit 122, a component data registration unit 123, and the like.
  • the information processing unit 121 is typically a computer including a CPU (central processing unit), RAM (main storage device), an auxiliary storage device such as a magnetic disk or a semiconductor disk, an input device, a display device, a communication IF, and the like. It can be configured. In that case, each function of the information processing unit 121 is realized by the CPU reading and executing a program stored in a storage device such as an auxiliary storage device.
  • the configuration of the information processing unit 121 may be a client-server scheme, grid computing, cloud computing, or the like, as well as a scheme realized by one computer.
  • all or part of the functions of the information processing unit 121 can be configured using a logic circuit such as an ASIC or an FPGA, or an on-board computer.
  • the substrate library 124 and the component library 125 illustrated in FIG. 12 may be stored in a local storage such as an auxiliary storage device of the information processing unit 121 or may be stored in a storage on a network such as a server or a cloud.
  • registration process For example, when a new electronic device is released from a manufacturer, or when it is determined that the above-described analyzer is an unknown substrate, the new substrate data and component data are registered using the library creation device.
  • the measuring unit 120 measures the board.
  • data of a two-dimensional transmission X-ray image of the substrate is obtained by the X-ray imaging unit 120a
  • data of a two-dimensional visible light image of the substrate is obtained by the visible light imaging unit 120b
  • the substrate is measured by the shape measurement unit 120c.
  • Data of the surface shape (three-dimensional profile) of These measurement data are taken into the information processing unit 121.
  • the interactive substrate data registration unit 122 is a function that provides the user with an environment that enables interactive input of substrate data and component data using a GUI (Graphical User Interface). For example, when the user selects measurement data fetched from the measurement unit 120 and executes a new substrate command, the measurement data is displayed on the display device, and the interactive substrate data registration unit 122 assigns a substrate ID. An arbitrary number or character string may be assigned to the substrate ID, or the manufacturer, the production number, the substrate number and the like may be read from the visible light image, and the substrate ID may be generated from the information. Alternatively, the user may input the substrate ID.
  • GUI Graphic User Interface
  • the user inputs component data to the transmission X-ray image or the visible light image displayed on the display device. For example, when an area of a part is specified using an input device such as a mouse and a part registration command is executed, a part data input window (not shown) is displayed, prompting the user to input a part ID and contained substance data. The user inputs the part ID of the part and also inputs information on the type and content of the specific substance contained in the part.
  • the interactive board data registration unit 122 searches the component library 125, and if there is a registered component (or a similar registered component) identical to the component, the information is presented to the user or the component
  • the component data may be assisted by automatically reflecting the component data.
  • the interactive board data registration unit 122 executes extraction of part feature data of the part.
  • the part feature data is, for example, image data of a visible light image of a part, image data of a transmission X-ray image of a part, various feature quantities extracted from these image data (part size / shape, number, shape / size of solder) Arrangement, number, shape, size, arrangement of electrodes, features of shading or texture, edge features, histograms, etc., positions of parts on a substrate, heights / postures of parts obtained from data of surface shape, etc.
  • the type of component feature data to be registered may be appropriately selected according to the function and application of the analyzer.
  • the interactive substrate data registration unit 122 When the user executes the data registration command after the input of the component data to all the components on the substrate, the interactive substrate data registration unit 122 generates substrate feature data.
  • the substrate feature data is, for example, visible light image data or transmission X-ray image data of the substrate, various feature quantities extracted from these image data (part layout, feature of gradation or texture, edge feature, histogram), etc. .
  • the type of substrate feature data to be registered may be appropriately selected in accordance with the function and application of the analyzer.
  • the substrate data acquired as described above is additionally registered in the substrate library 124 by the interactive substrate data registration unit 122.
  • the component data registration unit 123 is a function of registering component data in the component library 125.
  • the component data registration unit 123 receives the component data input or acquired in the above-described interactive board data registration unit 122, and updates the data of the component library 125.
  • the component data registration unit 123 for the component feature data and the contained substance data, is one of the new data and the existing data. It is better to improve data reliability by adopting more reliable data or statistically processing (average etc.) new data and existing data. By doing so, an improvement in the recognition rate of component recognition in the analyzer can be expected.
  • the registration process described in the present embodiment can be used in a process for causing the user of the analysis device to learn an unknown object by the analysis device, or a person who carries out sales and maintenance of the analysis device (service provider) Can also be used in the process of creating new product data and providing it to the user of the analyzer.
  • recording media may be distributed, may be downloadable through a network, or may be provided as cloud services (to prepare the latest board library and component library in online storage). May be
  • FIG. 18 is a configuration example of a library cloud service.
  • the library providing system 180 includes a large-capacity storage (storage device) 181 storing a substrate library and a component library, and a data providing unit 182.
  • the library providing system 180 is typically configured by a server computer including a CPU (central processing unit), RAM (main storage), auxiliary storage such as a magnetic disk or a semiconductor disk, an input device, a communication IF, etc. be able to.
  • each function of the library providing system 180 is realized by the CPU reading and executing a program stored in a storage device such as an auxiliary storage device.
  • the library providing system 180 may be configured by one computer or may be configured by a plurality of computers.
  • the data providing unit 182 When the data providing unit 182 receives a use request of the library from the electronic device analyzer 184 connected via the network 183 such as the Internet, the data providing unit 182 receives the data of the board library or the part library stored in the storage 181 accordingly. It transmits to the electronic device analyzer 184. That is, the data providing unit 182 has the functions of the board recognition unit, the component recognition unit, the contained substance determination unit, etc. of the electronic device analyzer shown in FIG. 2, FIG. 6, FIG. 8, FIG. Function of intermediating with the substrate library and component library (also referred to as “online library”).
  • the same library can be shared by a plurality of electronic device analyzers 184, effective use of data can be achieved.
  • the storage capacity on the electronic device analysis device 184 side can be reduced by enabling online use of the library, and always (even if the data of the library is not updated by oneself) It has the advantage of being able to use the latest library.
  • a library (also referred to as “local library”) may be stored in the local storage of the electronic device analyzer 184, and the local library and the online library may be properly used.
  • a local library may be referred to, and the online library may be referred to if the corresponding part or board can not be found in the local library.
  • the electronic device analyzer 184 automatically or manually acquires the latest data from the on-line library and updates the local library.
  • a person who creates component data and substrate data and registers them in a library may construct a business model in which these data are provided to a third party for a fee via a cloud service.
  • This will form a market for sensing data, that is, selling sensing data obtained by an X-ray imaging apparatus etc. to consumers using application systems that require it, through the Internet.
  • IoT Internet of Things
  • To optimize means to transfer resources from low to high needs and to enable the use of resources in a high value form.
  • a distribution function as the infrastructure is required.
  • sensing data distribution function is essential to IoT.
  • the cloud service of component data and substrate data described above corresponds to a sensing data distribution function in IoT. That is, the user purchases sensing data from which library provider using metadata including the type of the specific substance (resource) to be focused on, the type of the target part, the amount of consideration, etc. as a matching item for data distribution. It is possible to construct a mechanism to determine the
  • the sixth embodiment is configured to appropriately select a substrate analysis method based on the result of pre-sensing.
  • FIG. 13 is a diagram schematically showing the configuration of the analyzer.
  • the analyzer includes a pre-sensing unit 130, an imaging unit 131, and an information processing unit 132. Also, the information processing unit 132 has functions of a substrate library 133, a substrate recognition unit 134, a component library 135, a component recognition unit 136, a contained material determination unit 137, and the like.
  • the pre-sensing unit 130 is a device that performs simple measurement of the analysis target 13 (electronic device, component mounting board, and the like) prior to main measurement in the imaging unit 131.
  • a CCD camera that captures a visible light image (appearance image) of the analysis object 13 is used.
  • the sensing data (image data) obtained by the pre-sensing unit 130 is input to the information processing unit 132.
  • the imaging unit 131 is an apparatus capable of performing tomographic imaging of the analysis object 13.
  • an X-ray imaging apparatus such as tomosynthesis or CT is used.
  • X-ray tomography has the advantage of being able to observe detailed information on electronic devices and multilayer substrates, but has the disadvantage that it takes much processing time for imaging and image reconstruction. Therefore, in the present embodiment, the necessity of X-ray tomography is determined from the result of pre-sensing that can be measured in a short time and in a simple manner, and the processing efficiency is improved.
  • FIG. 14 is a flow chart showing the flow of analysis processing of the sixth embodiment.
  • a visible light image (appearance image) of the analysis object 13 is captured by the pre-sensing unit 130, and the image data is captured by the information processing unit 132 (step S140).
  • the substrate recognition unit 134 extracts the feature amount of the substrate from the image data of the analysis object 13 (step S141). For example, the size, color, and shape of the substrate, the layout of parts, features of shading and texture, and edge features can be used.
  • the substrate recognition unit 134 refers to the substrate library 133, compares the substrate feature data of each registered substrate with the feature quantity extracted from the image data of the analysis object 13, and determines the similarity of the feature quantity (coincidence) The substrate is identified by evaluating (step S142).
  • step S143 If the recognition of the substrate in the external appearance image is successful (step S143: YES), information on the components mounted on the substrate and the contained substances can be obtained from the substrate library 133, so X-ray tomography and component recognition processing are performed. skip. That is, the contained material determination unit 137 reads the mounted component data of the substrate from the substrate library 133, generates and outputs the contained material list from this, and ends the analysis processing (step S144).
  • step S143 when the substrate can not be recognized in the appearance image (step S143: NO), the analysis object 13 is transported to the imaging unit 131. Then, the imaging unit 131 captures an X-ray tomographic image of the analysis object 13, and the image data is captured by the information processing unit 132 (step S145). Then, the component recognition unit 136 applies component recognition processing to the X-ray tomographic image, and identifies each component mounted on the substrate (step S146). The contents of step S146 are the same as steps S31 to S35 of FIG. 3 of the first embodiment.
  • step S147 the contained substance determination unit 137 generates and outputs the contained substance list in which the information such as the type and the amount of the contained substance of each part specified in step S146 is recorded and ends the analysis processing (step S147).
  • the contents of step S147 are the same as step S36 in FIG.
  • the analyzer of this embodiment as in the first embodiment, it is possible to automatically determine whether or not a specific substance such as a noble metal or a rare metal is contained in the electronic device or the component mounting board, so recovery of the specific substance And the process of recycling can be executed efficiently.
  • a specific substance such as a noble metal or a rare metal
  • the process of recycling can be executed efficiently.
  • the necessity of X-ray imaging and component recognition is determined according to the result of pre-sensing, there is an advantage that the processing efficiency as a whole can be improved.
  • a two-dimensional transmission X-ray image as shown in FIG. 1 may be used.
  • substrate recognition by a transmission X-ray image may be performed, and if recognition is successful, mounting component data may be acquired from a substrate library, for example, a transmission X-ray image for overlapping of components as in a multilayer substrate. If it is difficult to recognize the substrate, X-ray tomography may be performed.
  • the imaging condition of X-ray tomography may be changed according to the result of pre-sensing .
  • the thickness of the object to be analyzed may be measured with a laser displacement meter or the like, and the number of times and the pitch of X-ray tomographic imaging may be adjusted according to the thickness. That is, in the case of a thin electronic device, only one layer is photographed, and in the case of a thick electronic device, two or more layers are photographed. With such a configuration, unnecessary tomographic imaging can be omitted, so that the processing efficiency as a whole can be improved.
  • the analyzer according to the seventh embodiment has a function of automatically determining a method for taking out a specific substance from among electronic devices and component mounting boards.
  • the configuration unique to the seventh embodiment will be mainly described, and the description of the configuration common to the above embodiments will be omitted.
  • FIG. 15 schematically shows a specific substance extraction method determining function provided in the analyzer of the seventh embodiment. This function can be added as an additional function of the analyzer of each embodiment described above.
  • the extraction method determination unit 150 receives the contained substance list obtained by substrate recognition and / or part recognition.
  • the contained substance list includes the substrate ID, the type and amount of the specific substance contained in each part, and the position information of each part. For example, when it is desired to extract the specific substance “tantalum” from the substrate, the extraction method determination unit 150 determines where on the substrate a component (such as a tantalum capacitor) containing tantalum exists based on the list of contained substances. It is determined how to cut the substrate in order to efficiently take out the parts to be extracted.
  • a component such as a tantalum capacitor
  • cutting operation sequence data defining the cutting position and the cutting procedure of the substrate is generated, and this sequence data is sent to the cutting / sorting device in the post process.
  • the cutting / sorting apparatus it is possible to cut the substrate according to the cutting operation sequence data, and to sort the parts to be extracted and the other parts.
  • FIG. 16 is another configuration example of the specific substance extraction method determining function.
  • Extraction method definition data defining the method of taking out the specific substance for each type of substrate is created in advance, and the substrate ID and the extraction method definition data are registered in the specific substance information library 160 in association with each other.
  • the extraction method determination unit 161 reads out the corresponding extraction method definition data from the specific substance information library 160. Then, an extraction method (substrate cutting position, cutting procedure, etc.) corresponding to the specific substance to be extracted is acquired from the extraction method definition data, cutting operation sequence data is generated, and sent to the cutting / sorting device.
  • This configuration also makes it possible to automate cutting and sorting of parts and to reduce the recovery cost of specific substances.
  • image data for example, visible light image (appearance image) etc.
  • image data for example, visible light image (appearance image) etc.
  • image data other than X-ray image is used for component recognition and substrate recognition
  • the position information of the parts of the substrate library is calculated from the image.
  • design information CAD data etc.
  • design is made in the substrate data of the substrate library.
  • Information may be stored.
  • the data structures of the component library and the board library shown in the above embodiment are merely examples, and if the information processing according to the present invention can be executed and the purpose can be achieved, how is the database and its data structure and data contents etc. You may design.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Business, Economics & Management (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Software Systems (AREA)
  • Evolutionary Computation (AREA)
  • Library & Information Science (AREA)
  • Artificial Intelligence (AREA)
  • Chemical & Material Sciences (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Strategic Management (AREA)
  • Quality & Reliability (AREA)
  • Sustainable Development (AREA)
  • Economics (AREA)
  • Operations Research (AREA)
  • Computing Systems (AREA)
  • Manufacturing & Machinery (AREA)
  • Medical Informatics (AREA)
  • Multimedia (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Environmental & Geological Engineering (AREA)
  • General Life Sciences & Earth Sciences (AREA)
  • Geochemistry & Mineralogy (AREA)
  • Geology (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Materials Engineering (AREA)
  • Mechanical Engineering (AREA)

Abstract

 再生利用可能な特定物質を含有する電子機器又は電子機器の構成品である有用物体に関して、有用物体の種類ごとに、コンピュータによる物体認識に利用される当該有用物体の特徴を表す特徴データと、当該有用物体に含まれる特定物質の種類及び量を表す含有物質データと、を対応付けたデータ構造を有する有用物体ライブラリを用意する。電子機器分析装置は、分析対象物から得られる情報を有用物体ライブラリにおける各有用物体の特徴データと比較して、分析対象物がどの有用物体に該当するかを特定し、該当する有用物体の含有物質データを有用物体ライブラリから取得することにより、分析対象物に含まれている特定物質の種類及び量を決定する。

Description

データ構造、ライブラリ作成装置、電子機器分析装置、ライブラリ提供システム
 本発明は、電子機器に含まれる有用な物質のリサイクルを効率化するための技術に関する。
 廃棄された電子機器から貴金属やレアメタルなどの有用資源を回収し再利用する取り組みが始まっている。レアメタルを中心とした希少資源の確保は、国家の安全保障上も大きな課題となっている。
 電子機器のリサイクル技術に関わる公知技術としては、例えば、特許文献1~3が存在する。しかし、これらは製品を破砕するか、粉にするか、混合物にした後に、物理的処理又は化学的処理によって、有用資源の再利用のために抽出するものである。このような方法では、有用資源の再利用のためのコストが大きくなり、有用資源の回収コストを抽出した有用資源の売価を下回るようにする事が大変に困難である。
 特許文献4、5には、取り出し対象の部品の位置を検出した上で、製品内からその部品を切り取って、取り出す方法が提案されている。特許文献4の方法は、構造が規格化されたHDD(ハードディスクドライブ)について、その構造情報を用いながら、希少資源を含む部品を選択的に切り取って処理するものである。また、特許文献5の方法は、X線を用いて対象製品の透過像を形成し、その透過像からモータの位置を測定し、適切な切断位置を決定して対象製品を切断して、モータを取り出すというものである。しかし、これらの方法は汎用性が小さいため、市場に出回っている様々な種類の製品に対し、製品種別や製品仕様に応じた的確な処理を提供することが難しい。
特開2013-685号公報 特開2012-21218号公報 特開2012-174770号公報 特開2012-41575号公報 特開2000-197870号公報
 携帯電話やコンピュータなどの電子機器から取り出せる有用資源の価値が、回収コストに比べて高くなければ、リサイクルビジネスが成立しない。この回収コストを小さくするためには、実際の回収プロセスにかける前に、電子機器や部品実装基板に含まれている有用資源の種類や含有量、さらにはどの位置に含まれているかなどを把握できるとよい。事前にこれらの情報が得られれば、それに基づき電子機器や基板の裁断・仕分けをしたり、回収プロセスを決定したり、あるいは回収処理に回すか(コストが合わないとして)廃棄するかを判断したりすることが可能となり、回収コストを可及的に低減できるからである。
 本来、電子機器はCADで設計されているので、この設計データを活用することができれば、電子機器に搭載されている部品の種類や位置が容易にわかるため、部品から回収可能な有用資源の種類や量を知ることができる。しかし、電子機器の設計データにはメーカの機密情報が多く含まれているため、メーカが設計データを公開することは稀である。その結果、設計データを利用して、電子機器内の有用資源の種類や含有量を検知する、というシステムは実現性に乏しい。
 本発明は上記実情に鑑みなされたものであり、電子機器やその構成品に含まれる再生利用可能な特定物質の種類や量を簡易な方法で検知し、特定物質の回収を効率化するための技術を提供することを目的とする。
 請求項1に係るデータ構造は、再生利用可能な特定物質を含有する電子機器又は電子機器の構成品である有用物体に関して、有用物体の種類ごとに、コンピュータによる物体認識に利用される当該有用物体の特徴を表す特徴データと、当該有用物体に含まれる特定物質の種類及び量を表す含有物質データと、を対応付けたことを特徴とする。
 請求項1に係るデータ構造を有するライブラリ(以下、「有用物体ライブラリ」ともよぶ。)を用いると、例えば使用済みの電子機器或いはその構成品が与えられたときに、コンピュータによる物体認識により当該電子機器或いは構成品の種類を特定(つまり、いずれの有用物体に該当するかを識別)することができ、さらにその認識結果に基づいて当該電子機器やその構成品に再利用可能な特定物質がどの程度含まれているかを簡単に判断することができる。したがって、有用物体ライブラリを活用した情報処理によって、電子機器やその構成品からの特定物質の回収処理を効率化できる。
 電子機器の構成品とは、電子機器から分離又は分解し得る物品であり、例えば、電子機器に内蔵された部品実装基板、部品実装基板に搭載された電子部品などが該当する。有用物体ライブラリとしては、例えば、電子部品の種類ごとに電子部品の特徴データと含有物質データを対応付けたもの(「部品ライブラリ」ともよぶ。)、部品実装基板の種類ごとに部品実装基板の特徴データと基板の含有物質データを対応づけたもの(「基板ライブラリ」ともよぶ。)、電子機器の種類ごとに電子機器の特徴データと電子機器の含有物質データを対応付けたもの(「電子機器ライブラリ」ともよぶ。)などを用いることができる。基板の含有物質データは、基板に搭載された部品個別の含有物質の種類及び量のデータを含んでいてもよいし、基板に搭載されたすべての部品の含有物質の合計量のデータを含んでいてもよい。電子機器の含有物質データについても同様である。記憶装置内に、複数種類のライブラリが格納されていてもよいし、同じライブラリの中に電子機器、部品実装基板、電子部品のデータが混在していてもよい。
 請求項2に係るデータ構造は、前記特徴データが、前記有用物体の画像データ及び/又は前記有用物体の画像データから抽出される特徴を表すデータを含むことを特徴とする。
 請求項2に係る構成のように、有用物体の画像データや画像の特徴を表すデータを特徴データとして有用物体ライブラリに登録しておけば、電子機器やその構成品を撮影した画像を用いた画像認識処理への適用が容易になる。
 請求項3に係るデータ構造は、前記画像データが、X線像データであることを特徴とする。
 請求項3に係る構成のように、X線像データ及び/又はX線像データから抽出されるデータを特徴データとして用いれば、電子機器の内部にある部品のように、外観からは視認できない部品についても認識が可能となり、様々な対象物への適用が可能である。
 請求項4に係るライブラリ作成装置は、請求項1~3のうちいずれか1項に記載のデータ構造を有する有用物体ライブラリを作成するライブラリ作成装置であって、登録対象物を計測する計測部と、前記計測部で得られた計測データに基づき前記登録対象物を識別するための特徴データを作成し、ユーザにより与えられた前記登録対象物の含有物質データと共に前記作成した特徴データを前記有用物体ライブラリに登録する情報処理部と、を有することを特徴とする。
 請求項4に係る構成によれば、有用物体ライブラリに登録する特徴データ及び含有物質データの作成が容易にできる。
 請求項5に係るライブラリ作成方法は、請求項1~3のうちいずれか1項に記載のデータ構造を有する有用物体ライブラリを作成するライブラリ作成方法であって、計測部により、登録対象物を計測するステップと、情報処理部により、前記計測部で得られた計測データに基づき前記登録対象物を識別するための特徴データを作成するステップと、前記情報処理部により、ユーザにより与えられた前記登録対象物の含有物質データと共に前記作成した特徴データを前記有用物体ライブラリに登録するステップと、を含むことを特徴とする。
 請求項5に係る構成によれば、有用物体ライブラリに登録する特徴データ及び含有物質データの作成が容易にできる。
 請求項6に係る電子機器分析装置は、請求項1~3のうちいずれか1項に記載のデータ構造を有する有用物体ライブラリを格納する記憶装置と、分析対象物から得られる情報を前記記憶装置に格納された有用物体ライブラリにおける各有用物体の特徴データと比較して、前記分析対象物がどの有用物体に該当するかを特定する認識部と、前記認識部の認識結果に基づき、該当する有用物体の含有物質データを前記有用物体ライブラリから取得することにより、前記分析対象物に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有することを特徴とする。
 請求項6に係る構成によれば、電子機器やその構成品のなかに再利用可能な特定物質がどの程度含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。
 請求項7に係る電子機器分析装置は、請求項1~3のうちいずれか1項に記載のデータ構造を有する有用物体ライブラリを記憶する記憶装置を有するシステムとネットワークを介して接続可能であり、分析対象物から得られる情報を前記システムから取得した有用物体ライブラリにおける各有用物体の特徴データと比較して、前記分析対象物がどの有用物体に該当するかを特定する認識部と、前記認識部の認識結果に基づき、該当する有用物体の含有物質データを前記有用物体ライブラリから取得することにより、前記分析対象物に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有することを特徴とする。
 請求項7に係る構成によれば、電子機器やその構成品のなかに再利用可能な特定物質がどの程度含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。
 請求項8に係るライブラリ提供システムは、請求項1~3のうちいずれか1項に記載のデータ構造を有する有用物体ライブラリを記憶する記憶装置と、ネットワークを介して接続された電子機器分析装置からの要求に応じて、前記記憶装置に格納されている有用物体ライブラリのデータを前記電子機器分析装置に対しネットワークを介して提供するデータ提供部と、を有することを特徴とする。
 請求項8に係るライブラリ提供システムを用いれば、例えば、クラウドによる有用物体ライブラリの提供サービスを簡単に実現できる。また、ライブラリ提供システムを利用する電子機器分析装置のユーザにとっては、有用物体ライブラリのオンライン利用が可能になることで、電子機器分析装置側の記憶容量を削減できるとともに、(自ら有用物体ライブラリのデータ更新を行わなくても)常に最新のライブラリを利用できるという利点がある。
 請求項9に係る電子機器分析装置は、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリを記憶する記憶装置と、分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、前記部品認識部の認識結果と前記部品ライブラリに記憶されている各電子部品の含有物質データとから、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有することを特徴とする。
 請求項9に係る電子機器分析装置によれば、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。
 請求項10に係る電子機器分析装置は、部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリを記憶する記憶装置と、分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、前記撮像部で得られた前記対象基板の画像データの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有することを特徴とする。
 請求項10に係る電子機器分析装置によれば、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、基板そのものを認識する方法を採ることで、処理の簡易化および高速化を期待できるとともに、基板上の各部品の含有物質の正確な情報を基板ライブラリから取得できるという利点がある。
 請求項11に係る電子機器分析装置は、部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリ、並びに、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリを記憶する記憶装置と、分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、前記撮像部で得られた前記対象基板の画像データの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、前記基板認識部による前記対象基板の認識に失敗した場合に、前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定することにより、前記対象基板の種類を特定する部品認識部と、前記基板認識部又は前記部品認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有することを特徴とする。
 請求項11に係る電子機器分析装置によれば、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、比較的軽い処理である基板認識を最初に実施し、基板単位での認識が困難な場合に補助的に部品認識を実施するようにしたことで、基板の認識率を向上できるとともに、全体としての処理効率を向上できるという利点がある。
 請求項12に係る電子機器分析装置は、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリ、並びに、部品実装基板の種類ごとに、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データを対応付けたデータ構造を有する基板ライブラリを記憶する記憶装置と、分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、前記部品認識部の認識結果と前記基板ライブラリに記憶されている各部品実装基板の実装部品データとを比較して、前記対象基板の種類を特定する基板認識部と、前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有することを特徴とする。
 請求項12に係る電子機器分析装置によれば、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、部品認識の結果を元に基板を特定し、基板ライブラリから各部品の情報を取得するようにしたので、分析対象物の画像からすべての部品を高精度に認識する必要がなくなり、処理の簡易化及び高速化を図ることができる。加えて、基板上の各部品の含有物質の正確な情報を取得することができる。
 請求項13に係る電子機器分析装置は、部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリ、並びに、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリを記憶する記憶装置と、分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、前記対象基板を前記撮像部よりも簡易的に計測し、前記対象基板のセンシングデータを取得するプレセンシング部と、前記プレセンシング部で得られた前記対象基板のセンシングデータの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得するか、又は、前記部品認識部の認識結果に基づき前記部品ライブラリから該当する実装部品の含有物質データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有し、前記基板認識部による前記対象基板の認識結果に応じて、前記撮像部による前記対象基板の撮影の要否を判断することを特徴とする。
 請求項13に係る電子機器分析装置によれば、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、プレセンシングの結果に応じて撮像部による撮影や部品認識の要否を判断しているので、全体としての処理効率を向上できるという利点がある。
 請求項14に係る電子機器分析装置は、部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリ、並びに、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリを記憶する記憶装置と、分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、前記対象基板を前記撮像部よりも簡易的に計測し、前記対象基板のセンシングデータを取得するプレセンシング部と、前記プレセンシング部で得られた前記対象基板のセンシングデータの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得するか、又は、前記部品認識部の認識結果に基づき前記部品ライブラリから該当する実装部品の含有物質データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有し、前記プレセンシングデータに基づいて、前記撮像部による前記対象基板の撮影条件を決定することを特徴とする。
 請求項14に係る電子機器分析装置によれば、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、プレセンシングの結果に応じて撮像部による撮影条件を調整するので、部品認識に最適な撮影が可能となり、認識率の向上や処理効率の向上を期待できるという利点がある。
 請求項15に係る電子機器分析装置は、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリを記憶するシステムとネットワークを介して接続可能であり、分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、前記部品認識部の認識結果と前記部品ライブラリに記憶されている各電子部品の含有物質データとから、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有することを特徴とする。
 請求項15に係る電子機器分析装置によれば、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。
 請求項16に係る電子機器分析装置は、部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリを記憶するシステムとネットワークを介して接続可能であり、分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、前記撮像部で得られた前記対象基板の画像データの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有することを特徴とする。
 請求項16に係る電子機器分析装置によれば、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、基板そのものを認識する方法を採ることで、処理の簡易化および高速化を期待できるとともに、基板上の各部品の含有物質の正確な情報を基板ライブラリから取得できるという利点がある。
 請求項17に係る電子機器分析装置は、部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリ、並びに、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリ、を記憶するシステムとネットワークを介して接続可能であり、分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、前記撮像部で得られた前記対象基板の画像データの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、前記基板認識部による前記対象基板の認識に失敗した場合に、前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定することにより、前記対象基板の種類を特定する部品認識部と、前記基板認識部又は前記部品認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有することを特徴とする。
 請求項17に係る電子機器分析装置によれば、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、比較的軽い処理である基板認識を最初に実施し、基板単位での認識が困難な場合に補助的に部品認識を実施するようにしたことで、基板の認識率を向上できるとともに、全体としての処理効率を向上できるという利点がある。
 請求項18に係る電子機器分析装置は、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリ、並びに、部品実装基板の種類ごとに、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データを対応付けたデータ構造を有する基板ライブラリ、を記憶するシステムとネットワークを介して接続可能であり、分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、前記部品認識部の認識結果と前記基板ライブラリに記憶されている各部品実装基板の実装部品データとを比較して、前記対象基板の種類を特定する基板認識部と、前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有することを特徴とする。
 請求項18に係る電子機器分析装置によれば、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、部品認識の結果を元に基板を特定し、基板ライブラリから各部品の情報を取得するようにしたので、分析対象物の画像からすべての部品を高精度に認識する必要がなくなり、処理の簡易化及び高速化を図ることができる。加えて、基板上の各部品の含有物質の正確な情報を取得することができる。
 請求項19に係る電子機器分析装置は、部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリ、並びに、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリ、を記憶するシステムとネットワークを介して接続可能であり、分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、前記対象基板を前記撮像部よりも簡易的に計測し、前記対象基板のセンシングデータを取得するプレセンシング部と、前記プレセンシング部で得られた前記対象基板のセンシングデータの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得するか、又は、前記部品認識部の認識結果に基づき前記部品ライブラリから該当する実装部品の含有物質データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有し、前記基板認識部による前記対象基板の認識結果に応じて、前記撮像部による前記対象基板の撮影の要否を判断することを特徴とする。
 請求項19に係る電子機器分析装置によれば、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、プレセンシングの結果に応じて撮像部による撮影や部品認識の要否を判断しているので、全体としての処理効率を向上できるという利点がある。
 請求項20に係る電子機器分析装置は、部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリ、並びに、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリ、を記憶するシステムとネットワークを介して接続可能であり、分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、前記対象基板を前記撮像部よりも簡易的に計測し、前記対象基板のセンシングデータを取得するプレセンシング部と、前記プレセンシング部で得られた前記対象基板のセンシングデータの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得するか、又は、前記部品認識部の認識結果に基づき前記部品ライブラリから該当する実装部品の含有物質データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有し、前記プレセンシングデータに基づいて、前記撮像部による前記対象基板の撮影条件を決定することを特徴とする。
 請求項20に係る電子機器分析装置によれば、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、プレセンシングの結果に応じて撮像部による撮影条件を調整するので、部品認識に最適な撮影が可能となり、認識率の向上や処理効率の向上を期待できるという利点がある。
 請求項21に係る電子機器分析装置は、請求項9~20のうちいずれか1項に記載の電子機器分析装置において、前記撮像部は、前記対象基板のX線像を取得するX線撮像装置であることを特徴とする。
 請求項21に係る電子機器分析装置によれば、X線像を用いたので、電子機器の内部にある部品、多層基板の部品、裏面に実装された部品のように、外観からは視認できない部品についても認識が可能となり、様々な対象物への適用が可能である。
 請求項22に係る電子機器分析装置は、請求項9~20のうちいずれか1項に記載の電子機器分析装置において、前記含有物質決定部は、前記対象基板に含まれている特定物質の種類及び量の情報と当該特定物質を含む部品の基板上の位置の情報とを含むデータを出力することを特徴とする。
 請求項22に係る電子機器分析装置によれば、このようなデータを後段の回収工程で活用することで、回収作業の効率化及び回収コストの低減を期待できる。
 請求項23に係る電子機器分析装置は、請求項22に記載の電子機器分析装置において、前記含有物質決定部により出力される、前記対象基板に含まれている特定物質の種類及び量の情報と当該特定物質を含む部品の基板上の位置の情報とを含むデータに基づいて、前記対象基板のなかから当該特定物質を取り出す方法を定義したデータを生成する特定物質抽出方法決定部、をさらに有することを特徴とする。
 請求項23に係る電子機器分析装置によれば、このようなデータを後段の回収工程で活用することで、回収作業の効率化及び回収コストの低減を期待できる。
 請求項24に係る電子機器分析装置は、請求項10~14、16~20のうちいずれか1項に記載の電子機器分析装置において、部品実装基板の種類ごとに、当該部品実装基板のなかから特定物質を取り出す方法を定義した抽出方法定義データを対応付けたデータ構造を有する特定物質情報ライブラリから、前記基板認識部の認識結果に基づき該当する部品実装基板の抽出方法定義データを取得する特定物質抽出方法決定部、をさらに有することを特徴とする。
 請求項24に係る電子機器分析装置によれば、このようなデータを後段の回収工程で活用することで、回収作業の効率化及び回収コストの低減を期待できる。
 本発明によれば、電子機器や部品実装基板に含まれる特定物質の種類や量を簡易な方法で検知し、特定物質の回収を効率化することができる。
電子機器分析装置の構成を模式的に示す図。 第1実施形態の分析装置の主たる機能構成を示すブロック図。 第1実施形態の分析装置による分析処理の流れを示すフローチャート。 はんだ特徴による部品認識について説明する図。 含有物質リストの例。 第2実施形態の分析装置の主たる機能構成を示すブロック図。 第2実施形態の分析装置による分析処理の流れを示すフローチャート。 第3実施形態の分析装置の主たる機能構成を示すブロック図。 第3実施形態の分析装置による分析処理の流れを示すフローチャート。 第4実施形態の分析装置の主たる機能構成を示すブロック図。 第4実施形態の分析装置による分析処理の流れを示すフローチャート。 第5実施形態のライブラリ作成装置を説明する図。 第6実施形態の電子機器分析装置の構成を模式的に示す図。 第6実施形態の分析装置による分析処理の流れを示すフローチャート。 第7実施形態の分析装置が備える特定物質抽出方法決定機能を示す図。 第7実施形態の分析装置が備える特定物質抽出方法決定機能の別の構成例を示す図。 (a)は部品ライブラリのデータ構造の一例を示す図であり、(b)は基板ライブラリのデータ構造の一例を示す図である。 ライブラリのクラウドサービスの構成例を示す図。
 <第1実施形態>
 (分析装置の構成)
 図1および図2を参照して、本発明の第1実施形態に係る電子機器分析装置の構成を説明する。図1は、電子機器分析装置(「分析装置」ともよぶ。)の外観および動作の様子を模式的に示す図であり、図2は、分析装置の主たる機能構成を示す機能ブロック図である。
 図1に示すように、分析装置1は、概略、撮像部10と情報処理部11とから構成される。撮像部10は、ベルトコンベヤなどの搬送装置12によって搬送される分析対象物13(電子機器、部品実装基板など)を撮影し、その画像データを情報処理部11に出力する装置である。情報処理部11は、撮像部10から入力された分析対象物13の画像データから実装部品や基板を認識(特定)し、その認識結果をもとに分析対象物13に含まれる特定物質(例えば、貴金属やレアメタルなどの有用材料)の含有量などを推定する装置である。
 本実施形態では、撮像部10として、2次元の透過X線像を撮影するX線撮像部を用いる。具体的には、撮像部10は、分析対象物13にX線を照射するX線発生器100と、分析対象物13を透過したX線を検出するX線検出器101と、画像生成部102から構成される。本実施形態では、主走査方向に多数の検出素子を並べたラインセンサ状のX線検出器101を用い、搬送装置12によって分析対象物13を副走査方向に搬送しながら透過線量の検出を連続的に行うことで、2次元X線像を取得する。画像生成部102は、2次元画像データの生成の他、必要に応じた前処理(濃度やコントラストの補正、ノイズ除去、分析対象物13の領域のトリミング、画像の回転など)を行う機能である。なお、画像生成部102の機能は情報処理部11のなかに設けてもよい。
 なお、撮像部10の構成は、これに限られない。例えば、検出素子を2次元アレイ状に配置したX線検出器101を用いてもよい。また、トモシンセシス、CT(コンピュータ・トモグラフィー)のようにX線断層像を取得可能なX線撮像装置を用いてもよい(これらのX線撮像装置の詳しい構成については例えば特許第5263204号公報を参照のこと。)。さらに、X線撮像装置とともに、あるいは、X線撮像装置に代えて、CCDカメラなどの可視光撮像装置、赤外線撮像装置、その他のセンサなどを用いてもよい。
 情報処理部11は、図2に示すように、部品ライブラリ110、部品認識部111、含有物質決定部112などの機能を有している。情報処理部11は、典型的には、CPU(中央演算処理装置)、RAM(主記憶装置)、磁気ディスクや半導体ディスクなどの補助記憶装置、入力装置、表示装置、通信IFなどを備えるコンピュータにより構成することができる。その場合、情報処理部11の各機能は、CPUが補助記憶装置などの記憶装置に格納されたプログラムを読み込み、実行することで実現されるものである。なお、情報処理部11の構成は、一台のコンピュータで実現する方式以外にも、クライアント-サーバ方式、グリッドコンピューティング、クラウドコンピューティングなどの構成を採ることもできる。あるいは、情報処理部11の機能の全部または一部を、ASICやFPGAなどのロジック回路や、オンボードコンピュータを用いて構成することもできる。
 部品ライブラリ110は、電子部品に関する情報である「部品データ」を記憶するデータベースである。部品ライブラリ110には、多くの種類の電子部品の部品データがあらかじめ登録されている。部品ライブラリ110は、補助記憶装置のようなローカルストレージに格納されてもよいし、サーバやクラウドのようなネットワーク上のストレージに格納されてもよいし、複数のストレージに分散していてもよい。
 「部品データ」には、図17(a)に示すように、少なくとも、「部品ID」、「部品特徴データ」、「含有物質データ」が含まれる。「部品ID」は、部品を一意に特定するための識別情報である。分析装置1あるいはユーザが部品ごとに部品IDを付与してもよいし、部品のメーカ・型番などを部品IDに利用することもできる。「部品特徴データ」は、画像認識に利用する部品のモデルデータであり、当該部品の特徴を表すものであればどのような種類の情報でもよい。例えば、部品の画像データそのものや、画像データから抽出される各種の特徴量などを部品特徴データとして用いることができる。一つの部品について、複数の画像データ(X線像と可視光像のように撮像方式の異なる画像、解像度の異なる画像、異なる画像処理が施された画像など)が登録されてもよいし、複数種類の部品特徴データが登録されていてもよい。図17(a)のデータ構造例では、部品特徴データとして、JPEG形式の画像データと、画像データから抽出された特徴量のデータとが登録されている。なお、画像データから抽出可能な特徴量には様々なものがある。例えば、部品のサイズ、形状、はんだの個数・形状・サイズ・配置、電極の個数・形状・サイズ・配置、濃淡やテクスチャの特徴、エッジ特徴など、画像認識による部品の特定(同定)に有意な特徴量であればどのようなものを用いてもよい。「含有物質データ」は、当該部品に含まれる(あるいは当該部品から回収可能な)特定物質の種類および量などの情報である。特定物質には、例えば、金、銀、白金などの貴金属や、パラジウム、コバルトなどのレアメタルが該当する。なお、部品から回収し再利用することが可能な有用材料であれば、貴金属やレアメタル以外の物質を対象としてもよい。
 部品認識部111は、撮像部10から入力された分析対象物13の基板の画像データから当該基板に実装されている電子部品を認識(特定)する機能であり、含有物質決定部112は、部品認識部111の認識結果をもとに分析対象物13に含まれる特定物質の種類や含有量などを判断する機能である。以下、これらの機能の詳細を、分析装置1の動作の流れとともに説明する。
 (分析装置の動作)
 図3は、分析装置1による分析処理の流れを示すフローチャートである。
 まず、分析対象物13である電子機器に内蔵された部品実装基板のX線像が撮像部10によって撮像され、その画像データが情報処理部11に取り込まれる(ステップS30)。図4(a)は、部品実装基板の透過X線像40の一例である。基板上の部品の材質や厚みによって透過するX線量に違いが出るため、画像の濃淡で部品各々の外形を観測できるだけでなく、特にX線吸収率の高い金属部分(はんだ、リード、金属配線など)を明瞭な像として観測することができる。
 次に、部品認識部111は、基板全体の画像40の中から部品の領域を検出する(ステップS31)。例えば、パターンマッチングにより部品らしい領域を検出する方法、二値化やクラスタリングにより同程度の濃度(画素値)の領域を抽出する方法など、どのような検出アルゴリズムを用いてもよい。図4(b)は、検出された部品領域を拡大して示した例である。
 ステップS31で検出された部品領域のそれぞれに対し、部品認識処理が実行される。ここでは一例として、はんだの特徴に基づいて部品の認識を行うアルゴリズムを説明する。部品認識部111は、注目する部品領域を選び、二値化処理を行う(ステップS32)。図4(b)の部品領域を二値化した結果を図4(c)に示す。前述のようにはんだ部分はX線吸収率が高く、明瞭な像としてX線像に表れているため、二値化によってはんだ部分のみを抽出することが容易である。そして、部品認識部111は、二値画像から、はんだの特徴を抽出する(ステップS33)。例えば、はんだの個数・形状・サイズ(面積、径、幅など)・配置などをはんだの特徴として用いるとよい。なお、図4(c)には部品41の外形を破線で示しているが、この破線は説明の便宜のために示した仮想的な補助線であり、実際の二値画像には存在しない線である(図4(d)~図4(f)における破線についても同様である)。
 図4(c)の部品41は、BGA(Ball Grid Array)パッケージの部品であり、このタイプの場合は、部品裏面に多数のボール型(円形)のはんだ41aが狭ピッチで配列されている。図4(d)~図4(f)は、他のパッケージタイプの部品のはんだを示している。抵抗やコンデンサなどのチップ部品42では部品の両端に蒲鉾型のはんだ42aがあり、リード部品43の場合は各々のリード部分に比較的狭小のはんだ43aがある。また、LGA(Land Grid Array)タイプの部品44の場合は部品44の裏面に多数の矩形のはんだ44aが配列されている。このようなはんだの特徴の違いは、同じパッケージタイプの部品であっても、メーカーが型番が違えば、はんだの個数や配列やピッチなどに違いがあることが多い。よって、X線像40から得られるはんだの特徴に着目することで、部品を区別(特定)することが可能である。なお、はんだの特徴のみで区別できない部品については、はんだ以外の特徴(例えば、部品の形状など)も考慮することで部品を特定してもよいし、(特定物質の含有量を同じとみなしても問題ない場合などには)同じ部品として取り扱っても構わない。
 部品認識部111は、部品ライブラリ110を参照し、各登録部品の部品特徴データのはんだ特徴と、X線像の部品領域から抽出したはんだ特徴とを比較し、はんだ特徴の類似度(一致度)を評価することにより、部品の特定を行う(ステップS34)。類似度の計算式や評価アルゴリズムに関しては、一般的な画像認識で用いられている各種の手法を利用できるため、ここでは詳しい説明を割愛する。なお、部品ライブラリ110の登録部品のいずれとも類似しない場合(例えば、類似度が所定の閾値を超える登録部品が存在しない場合)には、当該部品領域については以降の処理をスキップすればよい。
 部品認識部111による部品認識が成功した場合、含有物質決定部112は、当該部品の部品IDと含有物質データを部品ライブラリ110から読み込み、含有物質リストに追加する(ステップS35)。含有物質リストとは、基板に実装されている電子部品に含有されている(回収可能な)特定物質の種類及び量を記録したデータである。図5(a)は含有物質リストの一例であり、特定された部品ごとに、部品IDと含有物質データが記述されている。含有物質リストの形式はこれに限らず、図5(b)のように、部品IDごとに、部品の個数と含有物質データを記述する形式や、図5(c)のように、基板上の部品の位置の情報(部品領域の左上と右下の頂点の座標値など)も記述する形式や、図5(d)のように、特定物質の種類ごとの含有量(すべての部品の累計値)を記述する形式など、どのような形式でもよい。
 ステップS32~S35の処理を、分析対象物13のすべての部品に対して繰り返した後、含有物質決定部112が含有物質リストを出力して、分析処理を終了する(ステップS36)。
 このようにして作成された含有物質リストのデータは、後工程にて利用される。例えば、含有物質の有無(あるいは含有量の多少)に基づき、回収工程へ送るか/廃棄するかの選別を行ったり、含有物質の種類に基づきいずれの回収工程へ送るか仕分けたりすることができる。あるいは、特定物質を含有する部品の位置情報に基づき裁断機を制御することで、電子機器や部品実装基板のなかから必要な部品のみを自動的に取り出すこともできる。特に集積度のあまり高くない大型基板の場合には、このような方法で価値ある部品のみを取り出すことで、回収処理の大幅な効率向上が期待できる。
 以上述べた分析装置によれば、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、X線像を用いたので、電子機器の内部にある部品、多層基板の部品、裏面に実装された部品のように、外観からは視認できない部品についても認識が可能となり、様々な対象物への適用が可能である。さらに、X線像で明瞭な像となるはんだの特徴を部品認識に利用したので、比較的簡易な処理で十分な認識精度を得ることができる。
 なお本実施形態では、はんだ特徴の類似度を評価することで部品の特定を行ったが、例えば、登録部品の画像と分析対象物から抽出した部品の画像のあいだの相関係数や差分画像などを計算することで画像同士の類似度を評価することも好ましい。画像同士の類似度を評価する場合には、低解像度画像を用いたり、画像を小ブロックに分割したりすることで、処理を高速化してもよい。
 <第2実施形態>
 第1実施形態では個々の部品を認識したのに対し、第2実施形態では基板を認識の対象とする。以下、第2実施形態に特有の構成を主に説明し、第1実施形態と共通する構成については説明を割愛する。
 図6に、第2実施形態の情報処理部の機能構成を示す。情報処理部60は、基板ライブラリ600、基板認識部601、含有物質決定部602などの機能を有している。基板ライブラリ600は、部品実装基板に関する情報である「基板データ」を記憶するデータベースである。基板ライブラリ600には、多数の部品実装基板の基板データがあらかじめ登録されている。基板ライブラリ600は、第1実施形態の部品ライブラリと同様、ローカルストレージに格納されてもよいし、ネットワーク上のストレージに格納されてもよいし、複数のストレージに分散していてもよい。
 「基板データ」には、図17(b)に示すように、「基板ID」、「基板特徴データ」、「実装部品データ」が含まれる。「基板ID」は、基板を一意に特定するための識別情報である。分析装置あるいはユーザが基板ごとに基板IDを付与してもよいし、基板のメーカ・型番などを基板IDに利用することもできる。「基板特徴データ」は、画像認識に利用する基板のモデルデータであり、基板の特徴を表すものであればいかなる種類の情報でもよい。例えば、基板の画像データ、画像データから抽出される各種の特徴量などを基板特徴データとして用いることができる。一つの基板について、複数の画像データ(X線像と可視光像のように撮像方式の異なる画像、解像度の異なる画像、異なる画像処理が施された画像など)が登録されてもよいし、複数種類の基板特徴データが登録されていてもよい。図17(b)のデータ構造例では、基板特徴データとして、JPEG形式の画像データと、画像データから抽出された特徴量のデータとが登録されている。なお、画像データから抽出可能な基板の特徴量には様々なものがある。例えば、部品のレイアウト、濃淡やテクスチャの特徴、エッジ特徴、ヒストグラムなど、画像認識による基板の特定(同定)に有意な特徴量であればどのようなものを用いてもよい。「実装部品データ」は、この基板に実装された電子部品の種類、基板上の位置、電子部品に含有されている(回収可能な)特定物質の種類及び量などを記述したデータであり、例えば、図5(c)に示した含有物質リストと同じような形式のデータを用いることができる。なお、後段の処理で部品の位置情報を利用しないのであれば、実装部品データには少なくとも実装部品の種類(部品IDなど)と含有されている特定物質の情報が含まれていればよい。
 (分析装置の動作)
 図7は、第2実施形態の分析処理の流れを示すフローチャートである。
 まず、分析対象物13である部品実装基板のX線像が撮像部10によって撮像され、その画像データが情報処理部60に取り込まれる(ステップS70)。部品実装基板の透過X線像の一例を図4(a)に示す。基板上の部品の材質や厚みによって透過するX線量に違いが出るため、画像の濃淡で部品各々の外形を観測できるだけでなく、特にX線吸収率の高い金属部分(はんだ、リード、金属配線など)を明瞭な像として観測することができる。
 次に、基板認識部601は、分析対象物のX線像から基板の特徴量を抽出する(ステップS71)。基板の特徴量としては、前述のとおり、部品のレイアウト、濃淡やテクスチャの特徴、エッジ特徴、ヒストグラムなど様々なものが利用できる。
 次に、基板認識部601は、基板ライブラリ600を参照し、各登録基板の基板特徴データと、分析対象物のX線像から抽出した特徴量とを比較し、特徴量の類似度(一致度)を評価することにより、基板の特定を行う(ステップS72)。類似度の計算式や評価アルゴリズムに関しては、一般的な画像認識で用いられている各種の手法を利用できるため、ここでは詳しい説明を割愛する。なお、基板ライブラリ600の登録基板のいずれとも類似しない場合(例えば、類似度が所定の閾値を超える登録基板が存在しない場合)、つまり未知の基板である場合には、以降の処理をスキップすればよい。
 本実施形態では、特徴量の類似度を評価することで基板の特定を行ったが、例えば、登録基板の画像と分析対象物の画像のあいだの相関係数や差分画像などを計算することで画像同士の類似度を評価することも好ましい。画像同士の類似度を評価する場合には、低解像度画像を用いたり、画像を小ブロックに分割したりすることで、処理を高速化してもよい。
 基板認識部601による基板認識が成功した場合、含有物質決定部602は、当該基板の基板IDと実装部品データを基板ライブラリ600から読み込む。そして、図5(a)~図5(d)に例示したような含有物質リストを生成し、基板IDと含有物質リストを分析結果として出力し、処理を終了する(ステップS73)。
 以上述べた分析装置によれば、第1実施形態と同様、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、X線像を用いたので、電子機器の内部にある部品、多層基板の部品、裏面に実装された部品のように、外観からは視認できない部品についても認識が可能となり、様々な対象物への適用が可能である。さらに、基板そのものを認識する方法を採ることで、処理の簡易化および高速化を期待できるとともに、基板上の各部品の含有物質や位置の正確な情報を基板ライブラリ600から取得できるという利点がある。
 <第3実施形態>
 第3実施形態は、基板認識と部品認識を組み合わせることで、認識率の向上を図る構成である。以下、第3実施形態に特有の構成を主に説明し、前述の実施形態と共通する構成については説明を割愛する。
 図8に、第3実施形態の情報処理部の機能構成を示す。情報処理部80は、基板ライブラリ800、基板認識部801、部品ライブラリ802、部品認識部803、含有物質決定部804などの機能を有している。基板ライブラリ800と部品ライブラリ802に格納されるデータは、前述の実施形態で述べたものと同様である。
 図9は、第3実施形態の分析処理の流れを示すフローチャートである。
 まず、分析対象物である部品実装基板のX線像が撮像部10によって撮像され、その画像データが情報処理部80に取り込まれる(ステップS90)。次に、基板認識部801が、分析対象物のX線像から基板の特徴量を抽出する(ステップS91)。そして、基板認識部801は、基板ライブラリ800を参照し、各登録基板の基板特徴データと、分析対象物のX線像から抽出した特徴量とを比較し、特徴量の類似度(一致度)を評価することにより、基板の特定を行う(ステップS92)。ここまでの処理は、第2実施形態の図7のステップS70~S72と同じである。
 次に、基板認識部801は、分析対象物である基板の認識に成功したか否かによって、処理を分岐する(ステップS93)。認識の成否については、例えば、類似度が所定の閾値を超える登録基板が一つだけ検出された場合に認識成功と判断し、類似度が所定の閾値を超える登録基板が一つもなかったり、類似度が同程度の登録基板が複数存在したりした場合に(つまり一つの基板に絞り込めなかった場合に)、認識失敗と判断すればよい。
 基板の認識に失敗した場合(ステップS93:NO)には、基板認識部801は、基板ライブラリ800の中から、分析対象物と同じ基板である可能性のあるいくつかの登録基板を候補基板として選び出す(ステップS94)。例えば、ステップS92で計算した類似度が高いものから順にN個の候補基板を選択してもよいし、類似度がある基準を超えているものすべてを候補基板として選んでもよい。基板認識部801は、選び出した候補基板それぞれの基板IDを記述した候補基板IDリストを作成し、部品認識部803へと引き渡す。
 部品認識部803は、部品実装基板のX線像に対し部品認識処理を適用し、分析対象物である基板に実装された各部品を特定する(ステップS95)。部品認識処理の内容は、第1実施形態の図3のステップS31~S35で述べたものと同様のため、説明を省略する。なお、ステップS95では、基板上のすべての部品を特定する必要はなく、主要ないくつかの部品(例えば、サイズの大きい部品、BGAやLGAのパッケージの部品など)のみを特定するだけでもよい。そして、部品認識部803は、候補基板IDリストに含まれる複数の候補基板のなかから、ステップS95で特定された部品群を含んでいる基板を絞り込む(ステップS96)。各候補基板に実装されている部品の情報(部品ID、部品の位置など)は、基板IDにより基板ライブラリ800の基板データを参照することで取得できる。ステップS96において、一つの基板への絞り込みができなかった場合は、分析対象物は未知の基板と判断し、以降の処理をスキップする。
 ステップS96において一つの基板に絞り込めた場合、あるいは、ステップS93において基板の認識に成功した場合には、含有物質決定部804は、当該基板の基板IDと実装部品データを基板ライブラリ800から読み込む。そして、図5(a)~図5(d)に例示したような含有物質リストを生成し、基板IDと含有物質リストを分析結果として出力し、処理を終了する(ステップS97)。
 以上述べた分析装置によれば、前述の実施形態と同様、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、X線像を用いたので、電子機器の内部にある部品、多層基板の部品、裏面に実装された部品のように、外観からは視認できない部品についても認識が可能となり、様々な対象物への適用が可能である。加えて、比較的軽い処理である基板認識を最初に実施し、基板単位での認識が困難な場合に補助的に部品認識を実施するようにしたことで、基板の認識率を向上できるとともに、全体としての処理効率を向上できるという利点がある。
 <第4実施形態>
 第4実施形態は、部品認識の結果を用いて基板を特定する構成である。以下、第4実施形態に特有の構成を主に説明し、前述の実施形態と共通する構成については説明を割愛する。
 図10に、第4実施形態の情報処理部の機能構成を示す。情報処理部1010は、部品ライブラリ1000、部品認識部1001、基板ライブラリ1002、基板認識部1003、含有物質決定部1004などの機能を有している。部品ライブラリ1000と基板ライブラリ1002に格納されるデータは、前述の実施形態で述べたものと同様である。ただし、基板認識部1003が基板特徴データを利用しない場合には、基板ライブラリ1002内に基板特徴データを格納しなくてもよい。
 図11は、第4実施形態の分析処理の流れを示すフローチャートである。
 まず、分析対象物である部品実装基板のX線像が撮像部10によって撮像され、その画像データが情報処理部1010に取り込まれる(ステップS110)。次に、部品認識部1001が、分析対象物のX線像に対し部品認識処理を適用し、分析対象物である基板に実装されている各部品の特定を行う(ステップS111)。部品認識処理の内容は、第1実施形態の図3のステップS31~S35で述べたものと同様のため、説明を省略する。なお、ステップS111では、基板上のすべての部品を特定する必要はなく、主要ないくつかの部品(例えば、サイズの大きい部品、BGAやLGAのパッケージの部品など)のみを特定するだけでもよい。部品認識部1001は、特定された部品それぞれの部品IDを記述した部品IDリストを作成し、基板認識部1003へと引き渡す(ステップS112)。
 基板認識部1003は、基板ライブラリ1002を参照し、登録基板のなかから部品IDリストに記述された部品群を含んでいる基板を絞り込む(ステップS113)。もし、部品IDリストに記述された部品群を含む登録基板が複数存在した場合には、基板認識部1003は、基板の画像データやその特徴量を比較することで一つの基板に絞り込めばよい。その具体的な方法は、第2実施形態で述べたとおりである。なお、登録基板のなかに該当する基板が見つからなかった場合、つまり分析対象物が未知の基板であった場合には、以降の処理をスキップする。
 ステップS113において一つの基板に絞り込めた場合には、含有物質決定部1004は、当該基板の基板IDと実装部品データを基板ライブラリ1002から読み込む。そして、図5(a)~図5(d)に例示したような含有物質リストを生成し、基板IDと含有物質リストを分析結果として出力し、処理を終了する(ステップS114)。
 以上述べた分析装置によれば、前述の実施形態と同様、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、X線像を用いたので、電子機器の内部にある部品、多層基板の部品、裏面に実装された部品のように、外観からは視認できない部品についても認識が可能となり、様々な対象物への適用が可能である。さらに、部品認識の結果を元に基板を特定し、基板ライブラリから各部品の含有物質や位置の情報を取得するようにしたので、分析対象物の画像からすべての部品を高精度に認識する必要がなくなり、処理の簡易化及び高速化を図ることができる。加えて、基板上の各部品の含有物質や位置の正確な情報を取得することができる。
 <第5実施形態>
 第5実施形態では、部品データの生成及び部品ライブラリへの登録と、基板データの生成及び基板ライブラリへの登録について説明する。
 図12は、部品データ及び基板データの作成及びライブラリへの登録を行うライブラリ作成装置を説明するための図である。ライブラリ装置は、概略、計測部120と情報処理部121とから構成される。このライブラリ装置は、前述した分析装置とは別の装置とすることもできるし、分析装置の一機能として実装することもできる。
 計測部120は、登録対象物126(電子機器、部品実装基板など)を計測し、登録対象物126から得られた計測データを情報処理部121に出力する装置である。本実施形態では、計測部120として、透過X線像を撮影するX線撮像部120a、可視光像(外観)を撮影する可視光撮像部120b、基板や部品の3次元形状を計測する形状計測部120cなどを備える。形状計測部120cとしては、特殊なパタン照明を用いて表面形状を計測する装置や、レーザ変位計にて表面形状を計測する装置など、様々なものを用いることができる。また、ここで挙げた装置以外にも、例えば、トモシンセシスやCTなどのX線断層撮像装置などを計測部120として用いてもよい。
 情報処理部121は、対話型基板データ登録部122、部品データ登録部123などの機能を有している。情報処理部121は、典型的には、CPU(中央演算処理装置)、RAM(主記憶装置)、磁気ディスクや半導体ディスクなどの補助記憶装置、入力装置、表示装置、通信IFなどを備えるコンピュータにより構成することができる。その場合、情報処理部121の各機能は、CPUが補助記憶装置などの記憶装置に格納されたプログラムを読み込み、実行することで実現されるものである。なお、情報処理部121の構成は、一台のコンピュータで実現する方式以外にも、クライアント-サーバ方式、グリッドコンピューティング、クラウドコンピューティングなどの構成を採ることもできる。あるいは、情報処理部121の機能の全部または一部を、ASICやFPGAなどのロジック回路や、オンボードコンピュータを用いて構成することもできる。図12に示す基板ライブラリ124及び部品ライブラリ125は、情報処理部121の補助記憶装置などのローカルストレージに格納されてもよいし、サーバやクラウドのようなネットワーク上のストレージに格納されてもよい。
 (登録処理)
 例えば、メーカから新しい電子機器が発売された場合や、前述した分析装置において未知の基板と判断された場合などに、ライブラリ作成装置を用いて新たな基板データ及び部品データの登録を行う。
 図12に示すように、登録対象物126としての部品実装基板が与えられると、計測部120により当該基板の計測が行われる。本実施形態では、X線撮像部120aにより基板の2次元透過X線像のデータが得られ、可視光撮像部120bにより基板の2次元可視光像のデータが得られ、形状計測部120cにより基板の表面形状(3次元プロファイル)のデータが得られる。これらの計測データは、情報処理部121に取り込まれる。
 対話型基板データ登録部122は、GUI(グラフィカル・ユーザ・インターフェイス)を利用して対話的に基板データ及び部品データの入力を可能とする環境をユーザに提供する機能である。例えば、ユーザが計測部120から取り込まれた計測データを選び、新規基板コマンドを実行すると、これらの計測データが表示装置に表示されるとともに、対話型基板データ登録部122によって基板IDが割り当てられる。基板IDには任意の数字・文字列を割り当ててもよいし、可視光像からメーカ・製造番号・基板番号などを読み取り、それらの情報から基板IDを生成してもよい。あるいはユーザが基板IDを入力してもよい。
 ユーザは、表示装置に表示された透過X線像又は可視光像に対して、部品データの入力を行う。例えば、マウスなどの入力装置を利用して部品の領域を指定し、部品登録コマンドを実行すると、部品データ入力ウィンドウ(不図示)が表示され、部品ID及び含有物質データの入力が促される。ユーザは、当該部品の部品IDを入力するとともに、当該部品が含有する特定物質の種類及び含有量の情報を入力する。このとき、対話型基板データ登録部122は部品ライブラリ125を探索し、当該部品と同じ登録部品(あるいは類似する登録部品)が存在した場合には、その情報をユーザに提示したり、当該部品の部品データに自動で反映することで、部品データの入力をアシストしてもよい。
 また、対話型基板データ登録部122は、当該部品の部品特徴データの抽出を実行する。部品特徴データは、例えば、部品の可視光像の画像データ、部品の透過X線像の画像データ、これらの画像データから抽出される各種特徴量(部品サイズ・形状、はんだの個数・形状・サイズ・配置、電極の個数・形状・サイズ・配置、濃淡やテクスチャの特徴、エッジ特徴、ヒストグラムなど)、基板上の部品の位置、表面形状のデータから得られる部品の高さ・姿勢などである。登録する部品特徴データの種類は、分析装置の機能や用途に合わせて適宜選択すればよい。
 基板上のすべての部品に対し部品データの入力を終えた後、ユーザがデータ登録コマンドを実行すると、対話型基板データ登録部122によって、基板特徴データの生成が行われる。基板特徴データは、例えば、基板の可視光像データや透過X線像データ、これらの画像データから抽出される各種特徴量(部品のレイアウト、濃淡やテクスチャの特徴、エッジ特徴、ヒストグラム)などである。登録する基板特徴データの種類についても、分析装置の機能や用途に合わせて適宜選択すればよい。以上のようにして取得された基板データは、対話型基板データ登録部122により基板ライブラリ124に追加登録される。
 部品データ登録部123は、部品ライブラリ125に対して部品データの登録を行う機能である。上述した対話型基板データ登録部122において入力又は取得された部品データを、部品データ登録部123が受け取り、部品ライブラリ125のデータを更新する。このとき、すでに部品ライブラリ125のなかに同じ部品のデータが登録されていた場合には、部品データ登録部123は、部品特徴データ及び含有物質データについては、新たなデータと既存のデータのうちより信頼性の高い方のデータを採用するか、新たなデータと既存データを統計処理(平均など)することでデータの信頼性を向上するとよい。そうすることで、分析装置における部品認識の認識率の向上を期待できる。
 以上で、未知の対象物126の基板データ及び部品データのライブラリへの登録が完了する。本実施形態で述べた登録処理は、分析装置のユーザが未知の対象物を分析装置に学習させるためのプロセスで利用することもできるし、分析装置の販売・保守を行う者(サービス提供者)が新製品のデータを作成し分析装置のユーザへ提供するためのプロセスで利用することもできる。新製品のデータの提供手段としては、記録媒体を配布してもよいし、ネットワークを通じてダウンロード可能にしてもよいし、クラウドサービス(オンラインストレージに最新の基板ライブラリ及び部品ライブラリを準備する)として提供してもよい。
 図18は、ライブラリのクラウドサービスの構成例である。ライブラリ提供システム180は、基板ライブラリや部品ライブラリが格納された大容量のストレージ(記憶装置)181と、データ提供部182と、を有している。ライブラリ提供システム180は、典型的には、CPU(中央演算処理装置)、RAM(主記憶装置)、磁気ディスクや半導体ディスクなどの補助記憶装置、入力装置、通信IFなどを備えるサーバコンピュータにより構成することができる。その場合、ライブラリ提供システム180の各機能は、CPUが補助記憶装置などの記憶装置に格納されたプログラムを読み込み、実行することで実現されるものである。なお、ライブラリ提供システム180は、一台のコンピュータで構成してもよいし、複数台のコンピュータ構成してもよい。
 データ提供部182は、インターネットなどのネットワーク183を介して接続された電子機器分析装置184からライブラリの利用要求を受信すると、それに応じてストレージ181に格納されている基板ライブラリ又は部品ライブラリのデータを当該電子機器分析装置184に対し送信する。すなわち、データ提供部182は、図2、図6、図8、図10、図13に示される電子機器分析装置の基板認識部、部品認識部、含有物質決定部等の機能と、オンラインストレージ181の基板ライブラリ及び部品ライブラリ(「オンラインライブラリ」ともよぶ。)との仲介を行う機能である。
 このような仕組みによれば、複数台の電子機器分析装置184で同じライブラリを共用できるので、データの有効利用を図ることができる。また、電子機器分析装置184のユーザにとっては、ライブラリのオンライン利用が可能になることで、電子機器分析装置184側の記憶容量を削減できるとともに、(自らライブラリのデータ更新を行わなくても)常に最新のライブラリを利用できるという利点がある。
 オンラインライブラリを利用可能な場合、電子機器分析装置184のローカルストレージの中にはライブラリを格納しなくてもよい。あるいは、電子機器分析装置184のローカルストレージの中にもライブラリ(「ローカルライブラリ」ともよぶ。)を格納しておき、ローカルライブラリとオンラインライブラリを適宜使い分けてもよい。例えば、デフォルトではローカルライブラリを参照し、ローカルライブラリの中に該当する部品や基板が見つからない場合にオンラインライブラリを参照しにいってもよい。あるいは、電子機器分析装置184が、自動又は手動で、オンラインライブラリから最新のデータを取得し、ローカルライブラリをアップデートすることも好ましい。
 なお、部品データや基板データを作成しライブラリへ登録した者が、クラウドサービスによって、これらのデータを第三者に有償で提供するというビジネスモデルを構築してもよい。これは、言わば、X線撮像装置などで得たセンシングデータを、それを必要とするアプリケーションシステムを利用するコンシューマに、インターネットを通じて販売する、というセンシングデータのマーケットを形成するものとなる。
 最適化社会を実現するインフラとしてIoT(Internet of Things:モノのインターネット)が提唱されている。マクロに見ると、IoTは時間・空間・人・モノ・情報・エネルギーなどの資源を、様々な粒度で最適化するためのシステムを形成する。最適化するということは、必要性が低い部分から必要性が高い部分に資源を移転したり、価値の高い形態での資源の使用を可能にするということである。資源の移転や使用権の設定において「取引」が行われるので、そのインフラとしての流通機能が必要となる。この流通機能の1つとして「センシングデータ流通機能」がIoTには必須となる。
 上述した部品データや基板データのクラウドサービスは、IoTにおけるセンシングデータ流通機能に該当する。すなわち、注目する特定物質(資源)の種類と対象部品の種類と対価の金額などを含むメタデータを、データ流通のためのマッチング項目として用いて、ユーザがどのライブラリ提供者からセンシングデータを購入するのかを決定する、という仕組みを構築できる。
 <第6実施形態>
 第6実施形態は、プレセンシングの結果に基づき、基板の分析手法を適宜選択する構成である。
 (分析装置の構成)
 図13を参照して、第6実施形態に係る分析装置の構成を説明する。図13は、分析装置の構成を模式的に示す図である。
 本実施形態の分析装置は、プレセンシング部130と撮像部131と情報処理部132とを有している。また、情報処理部132は、基板ライブラリ133、基板認識部134、部品ライブラリ135、部品認識部136、含有物質決定部137などの機能を有している。
 プレセンシング部130は、撮像部131での本計測に先立ち、分析対象物13(電子機器、部品実装基板など)の簡易的な計測を行う装置である。本実施形態では、プレセンシング部130として、分析対象物13の可視光像(外観画像)を撮影するCCDカメラを用いる。プレセンシング部130で得られたセンシングデータ(画像データ)は情報処理部132に入力される。撮像部131は、分析対象物13の断層撮影が可能な装置であり、本実施形態では、トモシンセシス又はCTなどのX線撮像装置を用いる。X線断層撮影は、電子機器や多層基板の詳細な情報を観測できるという利点がある反面、撮影及び画像再構成の処理時間がかかるというデメリットがある。そこで本実施形態では、短時間かつ簡易的に計測可能なプレセンシングの結果からX線断層撮影の要否を判断し、処理の効率化を図る。
 図14は、第6実施形態の分析処理の流れを示すフローチャートである。
 まず、分析対象物13の可視光像(外観画像)がプレセンシング部130によって撮像され、その画像データが情報処理部132に取り込まれる(ステップS140)。すると、基板認識部134が、分析対象物13の画像データから基板の特徴量を抽出する(ステップS141)。例えば、基板のサイズ・色・形状、部品のレイアウト、濃淡やテクスチャの特徴、エッジ特徴などを用いることができる。そして、基板認識部134は、基板ライブラリ133を参照し、各登録基板の基板特徴データと、分析対象物13の画像データから抽出した特徴量とを比較し、特徴量の類似度(一致度)を評価することにより、基板の特定を行う(ステップS142)。
 外観画像で基板の認識に成功した場合(ステップS143:YES)は、基板に実装されている部品や含有物質に関する情報を基板ライブラリ133から取得可能であるため、X線断層撮影および部品認識処理をスキップする。すなわち、含有物質決定部137は、基板ライブラリ133から当該基板の実装部品データを読み込み、これから含有物質リストを生成し出力して、分析処理を終了する(ステップS144)。
 一方、外観画像では基板を認識できなかった場合(ステップS143:NO)は、分析対象物13は撮像部131に搬送される。そして、撮像部131によって、分析対象物13のX線断層像が撮影され、その画像データが情報処理部132に取り込まれる(ステップS145)。そして、部品認識部136が、X線断層像に対し部品認識処理を適用し、基板に実装された各部品を特定する(ステップS146)。ステップS146の内容は、第1実施形態の図3のステップS31~S35と同様である。そして、含有物質決定部137がステップS146で特定された各部品の含有物質の種類及び量などの情報を記録した含有物質リストを生成・出力して、分析処理を終了する(ステップS147)。ステップS147の内容は、図3のステップS36と同様である。
 本実施形態の分析装置によれば、第1実施形態と同様、電子機器や部品実装基板のなかに貴金属やレアメタルなどの特定物質が含まれているかどうかを自動で判別できるので、特定物質の回収および再資源化の処理を効率的に実行できる。また、プレセンシングの結果に応じてX線撮像及び部品認識の要否を判断しているので、全体としての処理効率を向上できるという利点がある。
 なお、プレセンシングには、外観画像でなく、例えば図1に示したような2次元透過X線像を用いてもよい。第2実施形態のごとく透過X線像による基板認識を実施し、認識に成功したら基板ライブラリから実装部品データを取得すればよいし、例えば多層基板のように部品の重なりのため透過X線像での基板認識が困難な場合には、X線断層撮影を実施すればよい。
 また、本実施形態では、プレセンシングの結果に応じてX線断層撮影を実施するか否かを判断しているが、プレセンシングの結果に応じてX線断層撮影の撮影条件を変えてもよい。例えば、プレセンシングにおいて、レーザー変位計等で分析対象物の厚みを計測し、その厚みに応じてX線断層撮影の撮影回数やピッチを調整してもよい。すなわち、厚みの小さい電子機器の場合には1層のみを撮影し、厚みの大きい電子機器の場合には2層以上の撮影を行うのである。このような構成によっても無駄な断層撮影が省かれるので、全体としての処理効率の向上を図ることができる。
 <第7実施形態>
 第7実施形態の分析装置は、電子機器や部品実装基板のなかから特定物質を取り出す方法を自動で決定する機能を有する。以下、第7実施形態に特有の構成を主に説明し、前述の実施形態と共通する構成については説明を割愛する。
 図15は、第7実施形態の分析装置が備える特定物質抽出方法決定機能を模式的に示している。この機能は、前述の各実施形態の分析装置の追加機能として付加できるものである。抽出方法決定部150は、基板認識及び/又は部品認識によって得られた含有物質リストを受け取る。この含有物質リストには、基板ID、各部品に含まれる特定物質の種類及び量、各部品の位置情報が含まれている。例えば、特定物質「タンタル」を当該基板から抽出したい場合、抽出方法決定部150は、含有物質リストに基づきタンタルを含む部品(タンタルコンデンサなど)が基板上のどの位置に存在するかを判断し、それらの抽出対象の部品を効率的に取り出すためには基板をどのように切断すればよいか決定する。そして、基板の切断位置及び切断手順を定義した切断作業シーケンスデータを生成し、このシーケンスデータを後工程の裁断・仕分け装置に送る。裁断・仕分け装置では、切断作業シーケンスデータに従って当該基板を切断し、抽出対象の部品とそれ以外の部分を仕分けることが可能となる。このような部品の裁断及び仕分けを自動化することで、特定物質の回収を効率化でき、回収コストを小さくすることができる。
 図16は、特定物質抽出方法決定機能の別の構成例である。基板の種類ごとに特定物質の取り出し方法を定義した抽出方法定義データをあらかじめ作成し、特定物質情報ライブラリ160に基板IDと抽出方法定義データを対応づけて登録してある。抽出方法決定部161は、基板認識及び/又は部品認識によって特定された基板IDを受け取ると、対応する抽出方法定義データを特定物質情報ライブラリ160から読み出す。そして、抽出したい特定物質に対応する抽出方法(基板の切断位置や切断手順など)を抽出方法定義データから取得し、切断作業シーケンスデータを生成し、裁断・仕分け装置に送る。この構成によっても、部品の裁断及び仕分けを自動化し、特定物質の回収コストを小さくすることができる。
 <その他の実施形態>
 上述した実施形態の構成は本発明の一具体例を示したものにすぎず、本発明の範囲を限定する趣旨のものではない。本発明はその技術思想を逸脱しない範囲において、種々の具体的構成を採り得るものである。
 例えば、上記実施形態では部品認識や基板認識にX線像を利用する例を説明したが、X線像以外の画像データ(例えば、可視光像(外観画像)など)を部品認識や基板認識に利用してもよい。また、上記実施形態では基板ライブラリの部品の位置情報を画像から計算していたが、電子機器や基板の設計情報(CADデータなど)を利用できる場合には、基板ライブラリの基板データのなかに設計情報を格納してもよい。また、上記実施形態で示した部品ライブラリや基板ライブラリのデータ構造はあくまでも一例であり、本発明に係る情報処理が実行でき目的が達成できれば、データベースやそのデータ構造やデータの内容などはどのように設計してもよい。
1:電子機器分析装置
10:撮像部
11:情報処理部
12:搬送装置
13:分析対象物

Claims (24)

  1.  再生利用可能な特定物質を含有する電子機器又は電子機器の構成品である有用物体に関して、
     有用物体の種類ごとに、コンピュータによる物体認識に利用される当該有用物体の特徴を表す特徴データと、当該有用物体に含まれる特定物質の種類及び量を表す含有物質データと、を対応付けた
    ことを特徴とするデータ構造。
  2.  前記特徴データが、前記有用物体の画像データ及び/又は前記有用物体の画像データから抽出される特徴を表すデータを含む
    ことを特徴とする請求項1に記載のデータ構造。
  3.  前記画像データが、X線像データである
    ことを特徴とする請求項2に記載のデータ構造。
  4.  請求項1~3のうちいずれか1項に記載のデータ構造を有する有用物体ライブラリを作成するライブラリ作成装置であって、
     登録対象物を計測する計測部と、
     前記計測部で得られた計測データに基づき前記登録対象物を識別するための特徴データを作成し、ユーザにより与えられた前記登録対象物の含有物質データと共に前記作成した特徴データを前記有用物体ライブラリに登録する情報処理部と、を有する
    ことを特徴とするライブラリ作成装置。
  5.  請求項1~3のうちいずれか1項に記載のデータ構造を有する有用物体ライブラリを作成するライブラリ作成方法であって、
     計測部により、登録対象物を計測するステップと、
     情報処理部により、前記計測部で得られた計測データに基づき前記登録対象物を識別するための特徴データを作成するステップと、
     前記情報処理部により、ユーザにより与えられた前記登録対象物の含有物質データと共に前記作成した特徴データを前記有用物体ライブラリに登録するステップと、を含む
    ことを特徴とするライブラリ作成方法。
  6.  請求項1~3のうちいずれか1項に記載のデータ構造を有する有用物体ライブラリを格納する記憶装置と、
     分析対象物から得られる情報を前記記憶装置に格納された有用物体ライブラリにおける各有用物体の特徴データと比較して、前記分析対象物がどの有用物体に該当するかを特定する認識部と、
     前記認識部の認識結果に基づき、該当する有用物体の含有物質データを前記有用物体ライブラリから取得することにより、前記分析対象物に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有する
    ことを特徴とする電子機器分析装置。
  7.  請求項1~3のうちいずれか1項に記載のデータ構造を有する有用物体ライブラリを記憶する記憶装置を有するシステムとネットワークを介して接続可能であり、
     分析対象物から得られる情報を前記システムから取得した有用物体ライブラリにおける各有用物体の特徴データと比較して、前記分析対象物がどの有用物体に該当するかを特定する認識部と、
     前記認識部の認識結果に基づき、該当する有用物体の含有物質データを前記有用物体ライブラリから取得することにより、前記分析対象物に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有する
    ことを特徴とする電子機器分析装置。
  8.  請求項1~3のうちいずれか1項に記載のデータ構造を有する有用物体ライブラリを記憶する記憶装置と、
     ネットワークを介して接続された電子機器分析装置からの要求に応じて、前記記憶装置に格納されている有用物体ライブラリのデータを前記電子機器分析装置に対しネットワークを介して提供するデータ提供部と、を有する
    ことを特徴とするライブラリ提供システム。
  9.  電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリを記憶する記憶装置と、
     分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、
     前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、
     前記部品認識部の認識結果と前記部品ライブラリに記憶されている各電子部品の含有物質データとから、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有する
    ことを特徴とする電子機器分析装置。
  10.  部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリを記憶する記憶装置と、
     分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、
     前記撮像部で得られた前記対象基板の画像データの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、
     前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有する
    ことを特徴とする電子機器分析装置。
  11.  部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリ、並びに、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリ、を記憶する記憶装置と、
     分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、
     前記撮像部で得られた前記対象基板の画像データの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、
     前記基板認識部による前記対象基板の認識に失敗した場合に、前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定することにより、前記対象基板の種類を特定する部品認識部と、
     前記基板認識部又は前記部品認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有する
    ことを特徴とする電子機器分析装置。
  12.  電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリ、並びに、部品実装基板の種類ごとに、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データを対応付けたデータ構造を有する基板ライブラリ、を記憶する記憶装置と、
     分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、
     前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、
     前記部品認識部の認識結果と前記基板ライブラリに記憶されている各部品実装基板の実装部品データとを比較して、前記対象基板の種類を特定する基板認識部と、
     前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有する
    ことを特徴とする電子機器分析装置。
  13.  部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリ、並びに、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリ、を記憶する記憶装置と、
     分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、
     前記対象基板を前記撮像部よりも簡易的に計測し、前記対象基板のセンシングデータを取得するプレセンシング部と、
     前記プレセンシング部で得られた前記対象基板のセンシングデータの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、
     前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、
     前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得するか、又は、前記部品認識部の認識結果に基づき前記部品ライブラリから該当する実装部品の含有物質データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有し、
     前記基板認識部による前記対象基板の認識結果に応じて、前記撮像部による前記対象基板の撮影の要否を判断する
    ことを特徴とする電子機器分析装置。
  14.  部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリ、並びに、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリ、を記憶する記憶装置と、
     分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、
     前記対象基板を前記撮像部よりも簡易的に計測し、前記対象基板のセンシングデータを取得するプレセンシング部と、
     前記プレセンシング部で得られた前記対象基板のセンシングデータの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、
     前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、
     前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得するか、又は、前記部品認識部の認識結果に基づき前記部品ライブラリから該当する実装部品の含有物質データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有し、
     前記プレセンシングデータに基づいて、前記撮像部による前記対象基板の撮影条件を決定する
    ことを特徴とする電子機器分析装置。
  15.  電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリを記憶するシステムとネットワークを介して接続可能であり、
     分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、
     前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、
     前記部品認識部の認識結果と前記部品ライブラリに記憶されている各電子部品の含有物質データとから、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有する
    ことを特徴とする電子機器分析装置。
  16.  部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリを記憶するシステムとネットワークを介して接続可能であり、
     分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、
     前記撮像部で得られた前記対象基板の画像データの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、
     前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有する
    ことを特徴とする電子機器分析装置。
  17.  部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリ、並びに、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリ、を記憶するシステムとネットワークを介して接続可能であり、
     分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、
     前記撮像部で得られた前記対象基板の画像データの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、
     前記基板認識部による前記対象基板の認識に失敗した場合に、前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定することにより、前記対象基板の種類を特定する部品認識部と、
     前記基板認識部又は前記部品認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有する
    ことを特徴とする電子機器分析装置。
  18.  電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリ、並びに、部品実装基板の種類ごとに、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データを対応付けたデータ構造を有する基板ライブラリ、を記憶するシステムとネットワークを介して接続可能であり、
     分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、
     前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、
     前記部品認識部の認識結果と前記基板ライブラリに記憶されている各部品実装基板の実装部品データとを比較して、前記対象基板の種類を特定する基板認識部と、
     前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有する
    ことを特徴とする電子機器分析装置。
  19.  部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリ、並びに、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリ、を記憶するシステムとネットワークを介して接続可能であり、
     分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、
     前記対象基板を前記撮像部よりも簡易的に計測し、前記対象基板のセンシングデータを取得するプレセンシング部と、
     前記プレセンシング部で得られた前記対象基板のセンシングデータの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、
     前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、
     前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得するか、又は、前記部品認識部の認識結果に基づき前記部品ライブラリから該当する実装部品の含有物質データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有し、
     前記基板認識部による前記対象基板の認識結果に応じて、前記撮像部による前記対象基板の撮影の要否を判断する
    ことを特徴とする電子機器分析装置。
  20.  部品実装基板の種類ごとに、当該部品実装基板の特徴を表す基板特徴データと、当該部品実装基板に実装された電子部品とそれに含まれる特定物質の種類及び量を表す実装部品データとを対応付けたデータ構造を有する基板ライブラリ、並びに、電子部品の種類ごとに、当該電子部品の特徴を表す部品特徴データと当該電子部品に含まれる特定物質の種類及び量を表す含有物質データとを対応付けたデータ構造を有する部品ライブラリ、を記憶するシステムとネットワークを介して接続可能であり、
     分析対象物の部品実装基板である対象基板を撮影し、画像データを取得する撮像部と、
     前記対象基板を前記撮像部よりも簡易的に計測し、前記対象基板のセンシングデータを取得するプレセンシング部と、
     前記プレセンシング部で得られた前記対象基板のセンシングデータの特徴と前記基板ライブラリに記憶されている各部品実装基板の基板特徴データとを比較して、前記対象基板の種類を特定する基板認識部と、
     前記撮像部で得られた前記対象基板の画像データの特徴と前記部品ライブラリに記憶されている各電子部品の部品特徴データとを比較して、前記対象基板に実装されている電子部品の種類を特定する部品認識部と、
     前記基板認識部の認識結果に基づき前記基板ライブラリから該当する部品実装基板の実装部品データを取得するか、又は、前記部品認識部の認識結果に基づき前記部品ライブラリから該当する実装部品の含有物質データを取得することにより、前記対象基板に含まれている特定物質の種類及び量を決定する含有物質決定部と、を有し、
     前記プレセンシングデータに基づいて、前記撮像部による前記対象基板の撮影条件を決定する
    ことを特徴とする電子機器分析装置。
  21.  前記撮像部は、前記対象基板のX線像を取得するX線撮像装置である
    ことを特徴とする請求項9~20のうちいずれか1項に記載の電子機器分析装置。
  22.  前記含有物質決定部は、前記対象基板に含まれている特定物質の種類及び量の情報と当該特定物質を含む部品の基板上の位置の情報とを含むデータを出力する
    ことを特徴とする請求項9~21のうちいずれか1項に記載の電子機器分析装置。
  23.  前記含有物質決定部により出力される、前記対象基板に含まれている特定物質の種類及び量の情報と当該特定物質を含む部品の基板上の位置の情報とを含むデータに基づいて、前記対象基板のなかから当該特定物質を取り出す方法を定義したデータを生成する特定物質抽出方法決定部、をさらに有する
    ことを特徴とする請求項22に記載の電子機器分析装置。
  24.  部品実装基板の種類ごとに、当該部品実装基板のなかから特定物質を取り出す方法を定義した抽出方法定義データを対応付けたデータ構造を有する特定物質情報ライブラリから、前記基板認識部の認識結果に基づき該当する部品実装基板の抽出方法定義データを取得する特定物質抽出方法決定部、をさらに有する
    ことを特徴とする請求項10~14、16~20のうちいずれか1項に記載の電子機器分析装置。
PCT/JP2014/078896 2013-11-14 2014-10-30 データ構造、ライブラリ作成装置、電子機器分析装置、ライブラリ提供システム WO2015072338A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
EP14861853.1A EP3070460A4 (en) 2013-11-14 2014-10-30 Data structure, library creation device, electronic device analysis device, and library provision system
US15/037,005 US20160267443A1 (en) 2013-11-14 2014-10-30 Data structure, library creation device, electronic device analysis device, and library provision system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013-236109 2013-11-14
JP2013236109A JP5811159B2 (ja) 2013-11-14 2013-11-14 電子機器分析装置、ライブラリ提供システム

Publications (1)

Publication Number Publication Date
WO2015072338A1 true WO2015072338A1 (ja) 2015-05-21

Family

ID=50786024

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/078896 WO2015072338A1 (ja) 2013-11-14 2014-10-30 データ構造、ライブラリ作成装置、電子機器分析装置、ライブラリ提供システム

Country Status (4)

Country Link
US (1) US20160267443A1 (ja)
EP (1) EP3070460A4 (ja)
JP (1) JP5811159B2 (ja)
WO (1) WO2015072338A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022224478A1 (ja) * 2021-04-21 2022-10-27 Jx金属株式会社 電気電子部品屑の処理方法及び電気電子部品屑の処理装置

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015232449A (ja) * 2014-06-09 2015-12-24 アサヒプリテック株式会社 廃電子基板に含まれる有価物の量を非破壊で評価する装置
US10091270B2 (en) * 2015-04-22 2018-10-02 SafeNet International LLC Method and system for allowing cloud-based applications to automatically integrate network enabled sensors during runtime
JP6470109B2 (ja) * 2015-05-26 2019-02-13 日本電信電話株式会社 含有資源量推定装置、含有資源量推定方法、および、含有資源量推定プログラム
JP6416742B2 (ja) * 2015-12-09 2018-10-31 日本電信電話株式会社 含有資源量推定装置、含有資源量推定方法、および、含有資源量推定プログラム
US10832358B2 (en) * 2017-01-19 2020-11-10 International Business Machines Corporation Disposition manager for resource recovery
JP7301783B2 (ja) * 2020-04-01 2023-07-03 Jx金属株式会社 電子・電気機器部品屑の組成解析方法、電子・電気機器部品屑の処理方法、電子・電気機器部品屑の組成解析装置及び電子・電気機器部品屑の処理装置
JP7301782B2 (ja) * 2020-04-01 2023-07-03 Jx金属株式会社 電子・電気機器部品屑の組成解析方法、電子・電気機器部品屑の処理方法、電子・電気機器部品屑の組成解析装置及び電子・電気機器部品屑の処理装置
CN113699388A (zh) * 2021-09-01 2021-11-26 信丰华锐钨钼新材料有限公司 一种钨废料分解工艺选择系统
KR102646286B1 (ko) * 2021-09-23 2024-03-11 주식회사 스피어테크 부품 검사 시스템
EP4163626A1 (en) * 2021-10-11 2023-04-12 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for assigning a material value score to a waste printed circuit board or a portion thereof and system for sorting waste printed circuit boards
WO2024038855A1 (ja) * 2022-08-17 2024-02-22 三菱マテリアル株式会社 取引管理装置、取引管理システム、ユーザ端末、取引管理方法、表示制御方法、およびプログラム
JP7456544B2 (ja) 2022-08-17 2024-03-27 三菱マテリアル株式会社 取引管理装置、取引管理システム、ユーザ端末、取引管理方法、表示制御方法、およびプログラム
JP7389528B1 (ja) * 2023-08-10 2023-11-30 株式会社日本選別化工 小型家電ごみの処理装置

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11244836A (ja) * 1998-03-02 1999-09-14 Mitsubishi Electric Corp リサイクル素材回収率演算装置
JPH11285682A (ja) * 1998-04-06 1999-10-19 Hitachi Ltd リサイクル処理装置
JP2000197870A (ja) 1998-10-29 2000-07-18 Daikin Ind Ltd 機械装置の解体方法および解体装置
JP2004031429A (ja) * 2002-06-21 2004-01-29 Fujitsu Ltd 環境負荷評価システム及び環境負荷評価方法
JP2007265360A (ja) * 2006-03-30 2007-10-11 Epson Imaging Devices Corp 有価金属管理システム
JP2012021218A (ja) 2010-07-16 2012-02-02 Dowa Eco-System Co Ltd タンタルの回収方法
JP2012041575A (ja) 2010-08-16 2012-03-01 National Institute Of Advanced Industrial Science & Technology 希少金属回収処理方法及び回収処理装置
JP2012124307A (ja) * 2010-12-08 2012-06-28 Fuji Mach Mfg Co Ltd 実装部品分別回収装置
JP2012174770A (ja) 2011-02-18 2012-09-10 Aqua Science Kk 希少金属を回収する機構を有する基板処理装置
JP2013000685A (ja) 2011-06-17 2013-01-07 Mitsui Mining & Smelting Co Ltd 家電製品からの有価金属回収方法
JP5263204B2 (ja) 2010-03-15 2013-08-14 オムロン株式会社 X線検査装置およびx線検査方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4332236A1 (de) * 1992-11-26 1995-03-23 F E S Used Electronics Elektro Anlage zur automatischen Entstückung
US6889163B2 (en) * 2002-06-21 2005-05-03 Fujitsu Limited System and method for assessing environmental load
US8807189B2 (en) * 2011-05-25 2014-08-19 Empire Technology Development Llc Removing and segregating components from printed circuit boards

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11244836A (ja) * 1998-03-02 1999-09-14 Mitsubishi Electric Corp リサイクル素材回収率演算装置
JPH11285682A (ja) * 1998-04-06 1999-10-19 Hitachi Ltd リサイクル処理装置
JP2000197870A (ja) 1998-10-29 2000-07-18 Daikin Ind Ltd 機械装置の解体方法および解体装置
JP2004031429A (ja) * 2002-06-21 2004-01-29 Fujitsu Ltd 環境負荷評価システム及び環境負荷評価方法
JP2007265360A (ja) * 2006-03-30 2007-10-11 Epson Imaging Devices Corp 有価金属管理システム
JP5263204B2 (ja) 2010-03-15 2013-08-14 オムロン株式会社 X線検査装置およびx線検査方法
JP2012021218A (ja) 2010-07-16 2012-02-02 Dowa Eco-System Co Ltd タンタルの回収方法
JP2012041575A (ja) 2010-08-16 2012-03-01 National Institute Of Advanced Industrial Science & Technology 希少金属回収処理方法及び回収処理装置
JP2012124307A (ja) * 2010-12-08 2012-06-28 Fuji Mach Mfg Co Ltd 実装部品分別回収装置
JP2012174770A (ja) 2011-02-18 2012-09-10 Aqua Science Kk 希少金属を回収する機構を有する基板処理装置
JP2013000685A (ja) 2011-06-17 2013-01-07 Mitsui Mining & Smelting Co Ltd 家電製品からの有価金属回収方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3070460A4

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022224478A1 (ja) * 2021-04-21 2022-10-27 Jx金属株式会社 電気電子部品屑の処理方法及び電気電子部品屑の処理装置
JP2022166727A (ja) * 2021-04-21 2022-11-02 Jx金属株式会社 電気電子部品屑の処理方法及び電気電子部品屑の処理装置
JP7264936B2 (ja) 2021-04-21 2023-04-25 Jx金属株式会社 電気電子部品屑の処理方法及び電気電子部品屑の処理装置

Also Published As

Publication number Publication date
US20160267443A1 (en) 2016-09-15
JP2014081943A (ja) 2014-05-08
JP5811159B2 (ja) 2015-11-11
EP3070460A1 (en) 2016-09-21
EP3070460A4 (en) 2017-11-22

Similar Documents

Publication Publication Date Title
WO2015072338A1 (ja) データ構造、ライブラリ作成装置、電子機器分析装置、ライブラリ提供システム
RU2571545C1 (ru) Классификация изображений документов на основании контента
US20090175411A1 (en) Methods and systems for use in security screening, with parallel processing capability
TW201419169A (zh) 物體識別裝置、物體識別方法及程式產品
KR101717768B1 (ko) 부품 결함 검사 방법 및 그 장치
WO2020189044A1 (ja) 検査装置、異常検出方法、コンピュータプログラム、学習モデルの生成方法、及び学習モデル
CN111814517B (zh) 垃圾投递检测方法及相关产品
JP2006208098A (ja) X線異物検出装置
JP2018004363A (ja) X線自動判定装置、x線自動判定方法
JP7214432B2 (ja) 画像処理方法、画像処理プログラム、記録媒体、画像処理装置、生産システム、物品の製造方法
US20170323150A1 (en) Object formation image management system, object formation image management apparatus, and non-transitory computer readable medium
JPWO2020071162A1 (ja) 教師データ生成装置、検査装置およびコンピュータプログラム
JP4536548B2 (ja) X線検査装置および蓄積情報抽出システム
JP2018081629A (ja) 判定装置、判定方法および判定プログラム
JP7307918B2 (ja) データ処理装置、データ処理プログラムおよび基板群評価システム
Dong et al. Pavement crack detection based on point cloud data and data fusion
JP6224524B2 (ja) 含有資源量推定装置、含有資源量推定方法、およびプログラム
CN115769256A (zh) 连续动态扫描的分割
JP2015232449A (ja) 廃電子基板に含まれる有価物の量を非破壊で評価する装置
JP2013200238A (ja) 画像検査方法および画像検査装置
Kampel et al. Virtual vessel reconstruction from a fragment''s profile
CN111539346A (zh) 一种食品质量检测方法及装置
Fonseka et al. Localization of component lead inside a THT solder joint for solder defects classification
Xiao et al. Automatic detection method for BGA defects based on x-ray imaging
JP2014174003A (ja) 画像検査方法および画像検査装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14861853

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15037005

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

REEP Request for entry into the european phase

Ref document number: 2014861853

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2014861853

Country of ref document: EP