JP2013249506A - Symbol identification method and symbol identification device - Google Patents

Symbol identification method and symbol identification device Download PDF

Info

Publication number
JP2013249506A
JP2013249506A JP2012124334A JP2012124334A JP2013249506A JP 2013249506 A JP2013249506 A JP 2013249506A JP 2012124334 A JP2012124334 A JP 2012124334A JP 2012124334 A JP2012124334 A JP 2012124334A JP 2013249506 A JP2013249506 A JP 2013249506A
Authority
JP
Japan
Prior art keywords
determination
temperature data
symbol
dimensional temperature
dimensional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012124334A
Other languages
Japanese (ja)
Other versions
JP5959319B2 (en
Inventor
Yoshinori Koizumi
芳範 小泉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Azbil Corp
Original Assignee
Azbil Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Azbil Corp filed Critical Azbil Corp
Priority to JP2012124334A priority Critical patent/JP5959319B2/en
Publication of JP2013249506A publication Critical patent/JP2013249506A/en
Application granted granted Critical
Publication of JP5959319B2 publication Critical patent/JP5959319B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Radiation Pyrometers (AREA)
  • Treatment Of Steel In Its Molten State (AREA)
  • Waste-Gas Treatment And Other Accessory Devices For Furnaces (AREA)

Abstract

PROBLEM TO BE SOLVED: To recognize a symbol for individual identification having measured temperature different from surface temperature of an object by using a two-dimentional temperature data measured with an infrared camera.SOLUTION: A symbol 3 for individual identification drawn with a heat-resistant paint having different emissivity, on a shell surface of a ladle 2, is measured with an infrared camera 4, a two-dimentional temperature data acquisition part 11 extracts temperature data of a symbol identification region including the symbol 3, a filtering part 12 removes noise, and a binary coded processing part 13 binarizes the noise-removed temperature data of the symbol identification region using a prescribed temperature threshold value and converts the binarized temperature data into an input image. A feature-conformity determination part 15 collates an input image with reference images of the respective symbols prepared in advance in a reference image holding part 14, and determines the symbol of the reference image having high degree of conformity as a symbol identification result.

Description

この発明は、対象領域を赤外線カメラで測定した温度データから、記号を識別する記号識別方法および記号識別装置に関するものである。   The present invention relates to a symbol identification method and a symbol identification device for identifying a symbol from temperature data obtained by measuring a target area with an infrared camera.

転炉または電気炉で溶製された溶鋼を収容して次工程へ搬送する取鍋は、温度変化による消耗等によって劣化していき、最悪の場合、溶鋼が漏洩する可能性があった。そこで、従来は赤外線カメラにより取鍋表面の鉄皮温度を測定し、測定温度に基づいて漏洩の可能性を予測し、漏洩を未然に防止する漏鋼防止方法が提案されている(例えば、特許文献1参照)。   The ladle that stores molten steel melted in a converter or electric furnace and conveys it to the next process deteriorates due to wear due to temperature change, and in the worst case, the molten steel may leak. Therefore, conventionally, a steel leakage prevention method has been proposed in which the iron skin temperature on the ladle surface is measured with an infrared camera, the possibility of leakage is predicted based on the measured temperature, and leakage is prevented in advance (for example, a patent) Reference 1).

一方、取鍋の個体識別は、取鍋表面に描かれた記号をオペレータが目視により確認したり、光学カメラで撮像した画像から文字認識したりしていた。なお、文字認識方法として、用途が取鍋の記号と車両ナンバープレートとで異なるが、赤外線カメラで撮像したナンバープレート画像を文字認識する方法がある(例えば、特許文献2参照)。   On the other hand, the individual identification of the ladle has been such that the operator visually confirms the symbol drawn on the surface of the ladle or recognizes characters from the image captured by the optical camera. In addition, as a character recognition method, although a use differs with the symbol of a ladle and a vehicle license plate, there exists a method of character-recognizing the license plate image imaged with the infrared camera (for example, refer patent document 2).

特開2009−19249号公報JP 2009-19249 A 特開2009−245385号公報JP 2009-245385 A

上記特許文献1では測定した2次元の温度データを漏洩予知に用いるだけであり、個体識別のためには別途、光学カメラ等の専用装置が必要になるという課題があった。   In the above-mentioned Patent Document 1, only the measured two-dimensional temperature data is used for leak prediction, and there is a problem that a dedicated device such as an optical camera is required for individual identification.

他方、上記特許文献2は認識対象が車両ナンバープレートであり、主として、光学カメラでの撮像が困難な夜間に赤外線カメラの撮像画像を代替使用するものであった。そのため、赤外線カメラ画像の文字認識を、従来の光学カメラ画像の文字認識と同じ方法で行う想定であり、温度データに基づく文字認識は行われていない。   On the other hand, in the above-mentioned patent document 2, the recognition target is a vehicle license plate, and the image picked up by the infrared camera is mainly used instead at night when it is difficult to pick up with the optical camera. Therefore, it is assumed that character recognition of an infrared camera image is performed by the same method as character recognition of a conventional optical camera image, and character recognition based on temperature data is not performed.

この発明は、上記のような課題を解決するためになされたもので、赤外線カメラが測定する2次元温度データを用いて、対象物の表面温度とは温度が異なる個体識別用記号を認識する記号識別方法および記号識別装置を提供することを目的とする。   The present invention has been made to solve the above-described problems, and uses two-dimensional temperature data measured by an infrared camera to recognize an individual identification symbol whose temperature is different from the surface temperature of an object. An object is to provide an identification method and a symbol identification device.

この発明に係る記号識別方法は、表面に放射率の異なる材料を用いて付された個体識別用の記号を有する対象物を赤外線カメラで測定した2次元温度データを取得する2次元温度データ取得ステップと、2次元温度データ取得ステップで取得した2次元温度データを所定の温度閾値で2値化して入力画像を生成する2値化処理ステップと、個体識別用の全ての種類の記号について、赤外線カメラで測定して2値化した基準画像を予め用意しておき、当該基準画像それぞれを2値化処理ステップで生成した入力画像と照合して、最も適合度合いの高い基準画像の記号を当該入力画像の記号として認識する特徴適合判定ステップとを備えるものである。   The symbol identification method according to the present invention includes a two-dimensional temperature data acquisition step of acquiring two-dimensional temperature data obtained by measuring an object having an individual identification symbol attached to a surface using materials having different emissivities with an infrared camera. A binarization processing step for binarizing the two-dimensional temperature data acquired in the two-dimensional temperature data acquisition step with a predetermined temperature threshold to generate an input image, and an infrared camera for all types of symbols for individual identification A reference image measured and binarized in advance is prepared in advance, and each of the reference images is collated with the input image generated in the binarization processing step, and the symbol of the reference image having the highest degree of matching is input to the input image. And a feature matching determination step for recognizing it as a symbol.

この発明に係る記号識別装置は、表面に放射率の異なる材料を用いて付された個体識別用の記号を有する対象物を赤外線カメラで測定した2次元温度データを取得する2次元温度データ取得部と、2次元温度データ取得部で取得した2次元温度データを所定の温度閾値で2値化して入力画像を生成する2値化処理部と、個体識別用の全ての種類の記号について、赤外線カメラで測定して2値化した基準画像を保持している基準画像保持部と、基準画像保持部が保持している基準画像それぞれを2値化処理部で生成した入力画像と照合して、最も適合度合いの高い基準画像の記号を当該入力画像の記号として認識する特徴適合判定部とを備えるものである。   A symbol identification device according to the present invention includes a two-dimensional temperature data acquisition unit that acquires two-dimensional temperature data obtained by measuring an object having an individual identification symbol attached to a surface using materials having different emissivities with an infrared camera. A binarization processing unit that binarizes the two-dimensional temperature data acquired by the two-dimensional temperature data acquisition unit with a predetermined temperature threshold and generates an input image, and an infrared camera for all types of symbols for individual identification The reference image holding unit holding the reference image measured and binarized and the reference image held by the reference image holding unit are compared with the input image generated by the binarization processing unit. A feature matching determination unit that recognizes a symbol of a reference image having a high matching degree as a symbol of the input image.

この発明によれば、対象物の表面とは放射率が異なる、つまり測定温度が異なる個体識別用記号を、赤外線カメラで測定した2次元温度データから認識するようにしたので、対象物の温度管理用の赤外線カメラを個体識別用に流用することができ、安価で付加価値の高い記号識別方法および記号識別装置を提供することができる。   According to the present invention, since the individual identification symbol having an emissivity different from that of the surface of the object, that is, the measured temperature is recognized from the two-dimensional temperature data measured by the infrared camera, the temperature management of the object is performed. Infrared cameras can be used for individual identification, and a low-cost and high added-value symbol identification method and symbol identification device can be provided.

この発明の実施の形態1に係る記号識別装置を含む記号識別システムの構成を示す図である。It is a figure which shows the structure of the symbol identification system containing the symbol identification device which concerns on Embodiment 1 of this invention. 実施の形態1に係る記号識別装置が用いる2次元温度データの一例を示す図である。It is a figure which shows an example of the two-dimensional temperature data which the symbol identification device which concerns on Embodiment 1 uses. 基準画像保持部が保持している基準画像の例を示す図である。It is a figure which shows the example of the reference | standard image which the reference | standard image holding | maintenance part hold | maintains. 特徴適合判定部が2次元データを1次元のデータ列に変換する例を示す図である。It is a figure which shows the example in which a feature matching determination part converts 2D data into a 1-dimensional data sequence. 特徴適合判定部の処理を説明する図であり、図5(a)は入力画像、図5(b)は入力画像と基準画像のデータ列、図5(c)は入力画像と基準画像のパワースペクトルを示す。FIGS. 5A and 5B are diagrams illustrating processing of a feature matching determination unit, FIG. 5A is an input image, FIG. 5B is a data string of the input image and the reference image, and FIG. 5C is a power of the input image and the reference image. The spectrum is shown. 特徴適合判定部の処理を説明する図であり、図6(a)は入力画像、図6(b)は入力画像と基準画像のデータ列、図6(c)は入力画像と基準画像のパワースペクトルを示す。FIGS. 6A and 6B are diagrams illustrating processing of a feature matching determination unit, FIG. 6A is an input image, FIG. 6B is a data string of the input image and the reference image, and FIG. 6C is a power of the input image and the reference image. The spectrum is shown. この発明の実施の形態2に係る記号識別装置の2次元温度データ取得部の処理を説明する図である。It is a figure explaining the process of the two-dimensional temperature data acquisition part of the symbol identification device which concerns on Embodiment 2 of this invention. この発明の実施の形態3に係る記号識別装置を含む記号識別システムの構成を示す図である。It is a figure which shows the structure of the symbol identification system containing the symbol identification device which concerns on Embodiment 3 of this invention. 実施の形態3に用いる赤外線カメラの測定対象領域を示す図である。FIG. 10 is a diagram illustrating a measurement target region of an infrared camera used in Embodiment 3. 位置補正部のセンタリング補正を説明する図であり、上下方向のセンタリングの例である。It is a figure explaining the centering correction | amendment of a position correction part, and is an example of the centering of an up-down direction. 位置補正部のセンタリング補正を説明する図であり、左右方向のセンタリングの例である。It is a figure explaining the centering correction | amendment of a position correction part, and is an example of the centering of the left-right direction. 判定領域設定部による判定領域の設定を説明する図である。It is a figure explaining the setting of the determination area | region by the determination area | region setting part. この発明の実施の形態5に係る記号識別装置において、2次元温度データ取得部の内部構成を示すブロック図である。In the symbol identification device concerning Embodiment 5 of this invention, it is a block diagram which shows the internal structure of a two-dimensional temperature data acquisition part. 実施の形態5に用いる赤外線カメラの測定対象領域を示す図である。It is a figure which shows the measurement object area | region of the infrared camera used for Embodiment 5. FIG.

実施の形態1.
図1に示す記号識別システム1は、取鍋2の鉄皮表面の温度分布を赤外線カメラ4で測定し、記号識別装置10がその温度分布データから取鍋2の鉄皮表面に描かれた個体識別用の記号3を認識して、取鍋2の個体識別を行うものである。
Embodiment 1 FIG.
The symbol identification system 1 shown in FIG. 1 measures the temperature distribution on the iron skin surface of the ladle 2 with an infrared camera 4, and the symbol identification device 10 is drawn on the iron skin surface of the ladle 2 from the temperature distribution data. The identification symbol 3 is recognized to identify the ladle 2 individually.

取鍋2の鉄皮表面には、割り振られた個体識別用の記号3が耐熱塗料で描かれている。図1の例では、個体識別用の記号3として数字が描かれているが、文字、図形などどのような記号でもよい。   On the iron skin surface of the ladle 2, the assigned individual identification symbol 3 is drawn with heat-resistant paint. In the example of FIG. 1, a number is drawn as the symbol 3 for individual identification, but any symbol such as a character or a figure may be used.

赤外線カメラ4は、取鍋2が次工程へ移動する移動経路に向けて設置されており、取鍋2が通るタイミングで、この取鍋2の個体識別用の記号3を含む所定の領域を測定し、その領域の温度分布を表す2次元温度データを出力する。この赤外線カメラ4は赤外線放射エネルギを温度に変換しているため、鉄皮と記号3が実際には同じ温度だったとしても、鉄皮と耐熱塗料の放射率の違いから測定結果には温度差が生じる。
なお、この赤外線カメラ4は、記号識別専用に用意する必要はなく、例えば上記特許文献1の漏鋼予知に用いる赤外線カメラと兼用可能である。
The infrared camera 4 is installed toward the moving path along which the ladle 2 moves to the next process, and measures a predetermined area including the individual identification symbol 3 of the ladle 2 at the timing when the ladle 2 passes. Then, two-dimensional temperature data representing the temperature distribution in the region is output. Since this infrared camera 4 converts infrared radiation energy into temperature, even if the iron skin and the symbol 3 are actually at the same temperature, the measurement result shows a temperature difference due to the difference in emissivity between the iron skin and the heat-resistant paint. Occurs.
The infrared camera 4 does not need to be prepared exclusively for symbol identification. For example, the infrared camera 4 can also be used as an infrared camera used for leaked steel prediction in Patent Document 1.

記号識別装置10はコンピュータで構成され、2次元温度データ取得部11、フィルタ処理部12、2値化処理部13、基準画像保持部14、および特徴適合判定部15の処理内容を記述している記号識別プログラムをコンピュータのメモリに格納し、コンピュータのCPUがメモリに格納されている記号識別プログラムを実行する。   The symbol identification device 10 is configured by a computer and describes the processing contents of the two-dimensional temperature data acquisition unit 11, the filter processing unit 12, the binarization processing unit 13, the reference image holding unit 14, and the feature matching determination unit 15. The symbol identification program is stored in the memory of the computer, and the CPU of the computer executes the symbol identification program stored in the memory.

2次元温度データ取得部11は、赤外線カメラ4の入力インタフェースであり、赤外線カメラ4の測定した2次元温度データを取得し、そのうちの個体識別用の記号3を含む所定のデータ範囲(以下、記号識別領域と称す)を抽出してフィルタ処理部12へ出力する。
図2に、2次元温度データ20と記号識別領域21の一例を示す。この図では、温度が高い領域を白色で表し、温度が低くなるほど黒くなる。
The two-dimensional temperature data acquisition unit 11 is an input interface of the infrared camera 4, acquires two-dimensional temperature data measured by the infrared camera 4, and has a predetermined data range including a symbol 3 for individual identification (hereinafter referred to as a symbol). Is extracted and output to the filter processing unit 12.
FIG. 2 shows an example of the two-dimensional temperature data 20 and the symbol identification area 21. In this figure, the region where the temperature is high is represented in white, and the region becomes black as the temperature decreases.

フィルタ処理部12は、2次元温度データ取得部11から入力された記号識別領域21の温度データをフィルタ処理して、ノイズを除去する。ここで言うノイズとは、赤外線カメラ4の設置環境に由来するノイズ(赤外線カメラ4の撮像領域に存在する物体の写り込み等)、取鍋2の形状に由来するノイズ(取鍋2の凹凸に起因した影等)であり、赤外線カメラ4の2次元温度データに毎回同じように生じるノイズである。このノイズは予め出現場所が特定できるので、フィルタ処理により記号3に影響しない範囲で除去しておく。
なお、設置環境および取鍋2の形状に由来する固有のノイズを除去する以外にも、例えば所定温度以下のデータをノイズと見なして除去する等のフィルタ処理を行ってもよい。
The filter processing unit 12 filters the temperature data of the symbol identification region 21 input from the two-dimensional temperature data acquisition unit 11 to remove noise. The noise referred to here is noise derived from the installation environment of the infrared camera 4 (such as reflection of an object existing in the imaging area of the infrared camera 4), noise derived from the shape of the ladle 2 (in the unevenness of the ladle 2) This is noise that occurs in the same manner in the two-dimensional temperature data of the infrared camera 4 every time. Since the appearance location of this noise can be specified in advance, it is removed within a range that does not affect the symbol 3 by filtering.
In addition to removing the inherent noise derived from the installation environment and the shape of the ladle 2, for example, a filtering process such as removing data below a predetermined temperature as noise may be performed.

2値化処理部13は、ノイズを除去した記号識別領域21の温度データを、個体識別用の記号3の表面温度と鉄皮の表面温度の境界に相当する所定の温度閾値で2値化して、白黒画像に変換する。例えば1つの温度測定値が1ピクセルを成す32×32ピクセルの記号識別領域21について、2値化処理部13は先ずその記号識別領域21の平均温度を計算し、これを仮の温度閾値とする。続いて2値化処理部13は、仮の温度閾値を低い値へΔT(例えば、1度)ずつ下げていき、記号識別領域21のうち、仮の温度閾値より低い温度領域がNピクセルになった時点で温度閾値を固定し、この温度閾値より温度が低い領域をON(黒)にし、残りの領域をOFF(白)にした白黒画像を生成する。この時点の温度閾値が、個体識別用の記号3の表面温度と鉄皮の表面温度の境界に相当し、相対的に温度の低い記号3の領域が黒、相対的に温度の高い鉄皮の領域が白に変換される。
なお、このNは、個体識別用の記号3の数字によらず同値とし、記号識別領域21に占める記号3の面積に基づいて予め適切な値を設定しておく。
The binarization processing unit 13 binarizes the temperature data of the symbol identification area 21 from which noise has been removed with a predetermined temperature threshold corresponding to the boundary between the surface temperature of the individual identification symbol 3 and the surface temperature of the iron skin. , Convert to black and white image. For example, for the 32 × 32 pixel symbol identification region 21 in which one temperature measurement value is one pixel, the binarization processing unit 13 first calculates the average temperature of the symbol identification region 21 and uses this as a temporary temperature threshold. . Subsequently, the binarization processing unit 13 lowers the temporary temperature threshold to a low value by ΔT (for example, once), and among the symbol identification regions 21, the temperature region lower than the temporary temperature threshold becomes N pixels. At this point, the temperature threshold is fixed, and a black and white image is generated in which an area having a temperature lower than the temperature threshold is turned on (black) and the remaining area is turned off (white). The temperature threshold at this point corresponds to the boundary between the surface temperature of the symbol 3 for individual identification and the surface temperature of the iron skin, the region of the symbol 3 having a relatively low temperature is black, and the region of the iron skin having a relatively high temperature is The area is converted to white.
Note that N is the same value regardless of the number of the symbol 3 for individual identification, and an appropriate value is set in advance based on the area of the symbol 3 in the symbol identification area 21.

基準画像保持部14は、後段の特徴適合判定部15で記号を識別するために用いる基準画像を記憶している記憶装置である。ここでは、予め全ての取鍋2の個体識別用の記号3を赤外線カメラ4で測定し、2次元温度データ取得部11、フィルタ処理部12および2値化処理部13により処理した白黒画像を作成して、基準画像として基準画像保持部14に格納しておく。図3に、基準画像保持部14が保持している個体識別用の記号3の基準画像の例を示す。
また、後にオペレータが識別結果を確認できるように、2値化処理部13が記号識別領域21の温度データをグレースケールの画像に変換し、基準画像保持部14などの記憶装置に保存しておいてもよい。
The reference image holding unit 14 is a storage device that stores a reference image used for identifying symbols by the feature matching determination unit 15 in the subsequent stage. Here, the symbol 3 for individual identification of all ladles 2 is measured with the infrared camera 4 in advance, and a black and white image processed by the two-dimensional temperature data acquisition unit 11, the filter processing unit 12 and the binarization processing unit 13 is created. Then, it is stored in the reference image holding unit 14 as a reference image. FIG. 3 shows an example of the reference image of the symbol 3 for individual identification held by the reference image holding unit 14.
Further, the binarization processing unit 13 converts the temperature data in the symbol identification area 21 into a gray scale image and stores it in a storage device such as the reference image holding unit 14 so that the operator can confirm the identification result later. May be.

特徴適合判定部15は、個体識別対象の取鍋2を測定した2次元温度データから生成された白黒画像(以下、入力画像と称す)を、基準画像保持部14が保持する各基準画像と比較して、一番適合度の高い基準画像を探す。そして、その基準画像の記号を、入力画像の記号識別結果とする。
ここで、判定方法の例として、(1)パワースペクトル誤差による判定、(2)パターンマッチによる判定を説明する。
The feature matching determination unit 15 compares a black and white image (hereinafter referred to as an input image) generated from two-dimensional temperature data obtained by measuring the ladle 2 to be individually identified with each reference image held by the reference image holding unit 14. Then, the reference image having the highest fitness is searched for. The symbol of the reference image is used as the symbol identification result of the input image.
Here, as an example of the determination method, (1) determination based on power spectrum error and (2) determination based on pattern matching will be described.

(1)パワースペクトル誤差による判定
図4は、2次元温度データを1次元のデータ列に変換する一例を示す図である。特徴適合判定部15は、記号識別対象の入力画像を、図4に示すように1次元のデータ列に変換し、高速フーリエ変換してパワースペクトルを計算する。同様に、特徴適合判定部15は基準画像保持部14の保持する各基準画像を1次元のデータ列に変換し、高速フーリエ変換してパワースペクトルを計算する。
なお、特徴適合判定部15は図4に示すように画像横方向にデータ列を生成するのではなく、画像縦方向にデータ列を生成してもよい。また、画像横方向と画像縦方向にそれぞれデータ列を生成して1組のパワースペクトルを計算してもよい。あるいは、2次元温度データを1次元のデータ列に変換せず、2次元のままパワースペクトルを計算してもよい。
さらに、特徴適合判定部15は、予め基準画像のパワースペクトルを計算して基準画像保持部14に格納しておいてもよい。
(1) Determination by Power Spectrum Error FIG. 4 is a diagram illustrating an example of converting two-dimensional temperature data into a one-dimensional data string. The feature matching determination unit 15 converts the input image to be identified by a symbol into a one-dimensional data string as shown in FIG. 4, and performs a fast Fourier transform to calculate a power spectrum. Similarly, the feature matching determination unit 15 converts each reference image held by the reference image holding unit 14 into a one-dimensional data string, and performs a fast Fourier transform to calculate a power spectrum.
Note that the feature matching determination unit 15 may generate a data string in the vertical direction of the image instead of generating a data string in the horizontal direction of the image as shown in FIG. Alternatively, a set of power spectra may be calculated by generating data sequences in the horizontal direction and the vertical direction of the image. Alternatively, the power spectrum may be calculated in two dimensions without converting the two-dimensional temperature data into a one-dimensional data string.
Furthermore, the feature matching determination unit 15 may calculate the power spectrum of the reference image in advance and store it in the reference image holding unit 14.

「38」の個体識別用の記号3が付与された取鍋2を温度測定した場合の入力画像を図5(a)に示す。図5(b)は、この入力画像のデータ列(実線)と記号「38」の基準画像のデータ列(破線)を示し、図5(c)に各データ列のパワースペクトルを示す。記号「38」の基準画像は、図3に示す。
特徴適合判定部15は、入力画像と基準画像のパワースペクトルの2乗誤差を求め、2乗誤差が低い基準画像を適合度が高いと判定する。
同一の記号「38」を撮像した入力画像と基準画像を比較した場合、記号識別領域21における記号3の位置ずれがあるため、図5(b)のデータ列では波形パターンが一致しないように見えるが、図5(c)のパワースペクトルで比較すると2乗誤差が22.7程度と小さく、適合度が高い。このように、パワースペクトル誤差による判定は、ON(黒)とOFF(白)の位置ずれがあっても高精度に判定できる。
FIG. 5A shows an input image when the temperature of the ladle 2 provided with the symbol 3 for individual identification “38” is measured. FIG. 5B shows the data string (solid line) of this input image and the data string (broken line) of the reference image of symbol “38”, and FIG. 5C shows the power spectrum of each data string. A reference image of the symbol “38” is shown in FIG.
The feature matching determination unit 15 obtains a square error between the power spectra of the input image and the reference image, and determines that the reference image having a low square error has a high matching degree.
When an input image obtained by capturing the same symbol “38” is compared with a reference image, the waveform pattern does not appear to match in the data string of FIG. However, when compared with the power spectrum of FIG. 5 (c), the square error is as small as about 22.7, and the fitness is high. Thus, the determination based on the power spectrum error can be determined with high accuracy even if there is a positional deviation between ON (black) and OFF (white).

一方、図6(a)に、「36」の個体識別用の記号3が付与された取鍋2を温度測定した場合の入力画像を示す。図6(b)は、この入力画像のデータ列(実線)と記号「38」の基準画像のデータ列(破線)を示し、図6(c)に各データ列のパワースペクトルを示す。
記号「36」を撮像した入力画像と、記号「38」を撮像した基準画像を比較した場合、数字の形状が似ているため、図6(b)のデータ列では波形パターンが似ているが、図6(c)のパワースペクトルで比較するとピークがずれており、2乗誤差が28.4と大きく適合度が低い。
On the other hand, FIG. 6A shows an input image when the temperature of the ladle 2 provided with the symbol 3 for individual identification of “36” is measured. FIG. 6B shows the data string (solid line) of this input image and the data string (broken line) of the reference image with the symbol “38”, and FIG. 6C shows the power spectrum of each data string.
When the input image obtained by imaging the symbol “36” and the reference image obtained by imaging the symbol “38” are compared, the shape of the numbers is similar, and therefore the waveform pattern is similar in the data string of FIG. In comparison with the power spectrum of FIG. 6C, the peak is shifted, the square error is as large as 28.4, and the fitness is low.

(2)パターンマッチ
特徴適合判定部15は、ON(黒)の領域とOFF(白)の領域それぞれについて、入力画像と基準画像とで一致する面積および一致しない面積を求め、一致面積と不一致面積の比率が高い基準画像は適合度が高いと判定する。
画像にノイズが少ない場合、パターンマッチにより高精度に判定できる。
(2) Pattern Match The feature match determination unit 15 obtains an area that matches and does not match between the input image and the reference image for each of the ON (black) area and the OFF (white) area. It is determined that a reference image with a high ratio is high in fitness.
When there is little noise in the image, it can be determined with high accuracy by pattern matching.

特徴適合判定部15は、(1)と(2)のいずれか一方の方法を用い、入力画像との適合度が最も高かった(または規定以上の適合度合いだった)基準画像の記号を、記号識別結果とする。あるいは、(1)と(2)を組み合わせて、判定精度をより向上させてもよい。組み合わせる場合、特徴適合判定部15は、例えば(2)のパターンマッチの比率が所定値以上になった基準画像の中で、(1)の2乗誤差が最も低い基準画像の記号を、記号識別結果とする。
ただし、(1)の2乗誤差が上限値より大きい場合は該当なしとする、(2)のパターンマッチの比率が下限値より小さい場合は該当なしとするといった例外処理を設定しておいてもよい。
The feature matching determination unit 15 uses either one of the methods (1) and (2), and determines the symbol of the reference image that has the highest matching degree with the input image (or the matching degree equal to or higher than the standard). The identification result. Alternatively, (1) and (2) may be combined to further improve the determination accuracy. When combining, for example, the feature matching determination unit 15 identifies the symbol of the reference image with the lowest square error of (1) among the reference images in which the pattern match ratio of (2) is equal to or greater than a predetermined value. As a result.
However, even if exception processing is set such that (1) the square error is larger than the upper limit value, it is not applicable, and (2) the pattern match ratio is smaller than the lower limit value. Good.

以上より、実施の形態1によれば、記号識別装置10は、鉄皮表面に放射率の異なる耐熱塗料を用いて付された個体識別用の記号3を有する取鍋2を赤外線カメラ4で測定した2次元温度データ20を2次元温度データ取得部11が取得して記号識別領域21を抽出する2次元温度データ取得ステップと、フィルタ処理部12が記号識別領域21の温度データのノイズを除去するフィルタ処理ステップと、2値化処理部13が記号識別領域21の温度データを所定の温度閾値で2値化して入力画像を生成する2値化処理ステップと、個体識別用の全ての種類の記号3について、赤外線カメラ4で測定して2値化した基準画像を予め基準画像保持部14に用意しておき、特徴適合判定部15がこれら基準画像それぞれを入力画像と照合して最も適合度合いの高い基準画像の記号を当該入力画像の記号3として認識する特徴適合判定ステップとからなる記号識別方法を実施するように構成した。このため、取鍋2の温度管理用の赤外線カメラ4を個体識別用に流用することができ、安価で付加価値の高い記号識別方法および記号識別装置を提供することができる。   As described above, according to the first embodiment, the symbol identification device 10 measures, with the infrared camera 4, the ladle 2 having the individual identification symbol 3 attached to the surface of the iron skin using a heat-resistant paint having a different emissivity. The two-dimensional temperature data acquisition step in which the two-dimensional temperature data acquisition unit 11 acquires the extracted two-dimensional temperature data 20 and extracts the symbol identification region 21, and the filter processing unit 12 removes noise from the temperature data in the symbol identification region 21. Filter processing step, binarization processing unit 13 binarizes the temperature data of the symbol identification area 21 with a predetermined temperature threshold value to generate an input image, and all kinds of symbols for individual identification 3, a reference image measured by the infrared camera 4 and binarized is prepared in the reference image holding unit 14 in advance, and the feature matching determination unit 15 compares each of these reference images with the input image to obtain the most. Symbols if the degree of high reference image and configured to implement a symbol identification method comprising the recognized feature similarity judgment step as a symbol 3 of the input image. For this reason, the infrared camera 4 for temperature management of the ladle 2 can be diverted for individual identification, and a low-cost and high added-value symbol identification method and symbol identification device can be provided.

また、実施の形態1によれば、特徴適合判定部15は、特徴適合判定ステップで、基準画像のパワースペクトルと入力画像のパワースペクトルを求め、当該パワースペクトル間の誤差が小さいほど適合度合いが高いと判定するように構成した。このため、個体識別用の記号3の位置ずれに対して頑健な適合判定を行うことができる。   Further, according to the first embodiment, the feature matching determination unit 15 obtains the power spectrum of the reference image and the power spectrum of the input image in the feature matching determination step, and the degree of matching is higher as the error between the power spectra is smaller. It was configured to be judged. For this reason, it is possible to make a robust conformance determination against the positional deviation of the symbol 3 for individual identification.

また、実施の形態1によれば、2値化処理部13は、2値化処理ステップで、記号識別領域21の温度データの平均温度を求め、当該平均温度から値を下げていきその値より低い温度のデータ数が一定数(N)になる値を温度閾値に定めて2値化するように構成した。このため、取鍋2の温度の変動に対して頑健な適合判定を行うことができる。   Further, according to the first embodiment, the binarization processing unit 13 obtains the average temperature of the temperature data of the symbol identification area 21 in the binarization processing step, and lowers the value from the average temperature, and from the value A value at which the number of low temperature data becomes a fixed number (N) is determined as a temperature threshold value and binarized. For this reason, robust conformity determination can be performed with respect to fluctuations in the temperature of the ladle 2.

また、実施の形態1によれば、特徴適合判定部15は、特徴適合判定ステップで、基準画像と入力画像のパワースペクトル間の誤差に基づく判定に加え、基準画像と入力画像のパターンマッチに基づく判定を組み合わせて、適合度合いを判定するように構成した。このため、適合判定を高精度に行うことができる。   Further, according to the first embodiment, the feature matching determination unit 15 is based on the pattern matching between the reference image and the input image in addition to the determination based on the error between the power spectra of the reference image and the input image in the feature matching determination step. The determination is combined to determine the degree of matching. For this reason, the conformity determination can be performed with high accuracy.

実施の形態2.
本実施の形態2に係る記号識別システムは、図面上では図1の記号識別システム1と同様のため、図1を援用する。
取鍋2が所定位置で停止している最中に赤外線カメラ4で測定する場合はよいが、次工程へ移動している最中に測定する場合には、測定タイミングがずれると2次元温度データ20における個体識別用の記号3の位置もずれるため、識別精度が低下することがある。そこで、本実施の形態2では、記号識別装置10の2次元温度データ取得部11が、2次元温度データ20から記号識別領域21を抽出する際に、抽出位置を変えて複数の記号識別領域21を抽出し、特徴適合判定部15がそれぞれの記号識別領域21について基準画像との適合度を判定する。
Embodiment 2. FIG.
Since the symbol identification system according to the second embodiment is similar to the symbol identification system 1 of FIG. 1 on the drawing, FIG. 1 is used.
It is good to measure with the infrared camera 4 while the ladle 2 is stopped at a predetermined position. However, when measuring while moving to the next process, if the measurement timing is shifted, two-dimensional temperature data is used. Since the position of the symbol 3 for individual identification in 20 is also shifted, the identification accuracy may be lowered. Therefore, in the second embodiment, when the two-dimensional temperature data acquisition unit 11 of the symbol identification device 10 extracts the symbol identification region 21 from the two-dimensional temperature data 20, the extraction position is changed and a plurality of symbol identification regions 21 is obtained. And the feature matching determination unit 15 determines the matching degree of each symbol identification area 21 with the reference image.

図7は、2次元温度データ20の9箇所から9個の記号識別領域21−1〜21−9を抽出する様子を示す図である。2次元温度データ取得部11は、2次元温度データ20のうち、個体識別用の記号3を含むと想定される所定のデータ範囲を抽出して記号識別領域21−1とする。また、この記号識別領域21−1に対して、上、下、右、左方向にそれぞれ所定量移動した領域のデータ範囲を抽出して記号識別領域21−2〜21−5とする。さらに、記号識別領域21−1に対して、斜め右上、斜め右下、斜め左上、斜め左下方向にそれぞれ所定量移動した領域のデータ範囲を抽出して記号識別領域21−6〜21−9とする。
なお、図7は一例であり、記号識別領域を抽出する位置および数は任意でよい。
FIG. 7 is a diagram showing how nine symbol identification areas 21-1 to 21-9 are extracted from nine locations of the two-dimensional temperature data 20. The two-dimensional temperature data acquisition unit 11 extracts a predetermined data range that is assumed to include the symbol 3 for individual identification from the two-dimensional temperature data 20, and sets it as a symbol identification region 21-1. In addition, a data range of an area moved by a predetermined amount in the upward, downward, right, and left directions is extracted from the symbol identification area 21-1 to be symbol identification areas 21-2 to 21-5. Further, a data range of an area moved by a predetermined amount in the diagonally upper right, diagonally lower right, diagonally upper left, and diagonally lower left directions is extracted from the symbol identification area 21-1, and the symbol identification areas 21-6 to 21-9 are extracted. To do.
Note that FIG. 7 is an example, and the position and number of extraction of the symbol identification region may be arbitrary.

フィルタ処理部12は、記号識別領域21−1〜21−9それぞれに対してフィルタ処理を行い、ノイズを除去する。2値化処理部13は、記号識別領域21−1〜21−9それぞれに対して温度閾値を決定し2値化した白黒画像(入力画像)を生成する。特徴適合判定部15は、記号識別領域21−1〜21−9の9枚の入力画像それぞれに対して、基準画像保持部14が保持する各基準画像との(1)パワースペクトル誤差および(2)パターンマッチのいずれか一方、またはその両方の判定を行う。そして、9枚の入力画像との適合度合いが一番高い基準画像の記号を、記号識別結果とする。   The filter processing unit 12 performs filter processing on each of the symbol identification areas 21-1 to 21-9 to remove noise. The binarization processing unit 13 determines a temperature threshold value for each of the symbol identification areas 21-1 to 21-9 and generates a binarized black and white image (input image). The feature matching determination unit 15 performs (1) power spectrum error and (2) with each reference image held by the reference image holding unit 14 for each of the nine input images in the symbol identification regions 21-1 to 21-9. ) Determine one or both of the pattern matches. The symbol of the reference image having the highest degree of matching with the nine input images is set as the symbol identification result.

以上より、実施の形態2によれば、2次元温度データ取得部11は、2次元温度データ取得ステップで、取鍋2の2次元温度データ20において個体識別用の記号3が存在すると想定される領域から、位置を変えて複数の記号識別領域21−1〜21−9の温度データを抽出し、2値化処理部13は、2値化処理ステップで、複数の記号識別領域21−1〜21−9の温度データそれぞれを所定の温度閾値で2値化して複数の入力画像を生成し、特徴適合判定部15は、特徴適合判定ステップで、基準画像保持部14の保持している基準画像それぞれを複数の入力画像と照合して、最も適合度合いの高い基準画像の記号を認識するように構成した。このため、取鍋2の移動中に赤外線カメラ4が測定するなどして個体識別用の記号3の位置ずれが生じた場合でも、高精度に適合判定を行うことができる。   As described above, according to the second embodiment, the two-dimensional temperature data acquisition unit 11 is assumed to have the symbol 3 for individual identification in the two-dimensional temperature data 20 of the ladle 2 in the two-dimensional temperature data acquisition step. The temperature data of the plurality of symbol identification areas 21-1 to 21-9 are extracted from the areas at different positions, and the binarization processing unit 13 performs a plurality of symbol identification areas 21-1 to 21-1 in the binarization processing step. Each of the temperature data 21-9 is binarized with a predetermined temperature threshold value to generate a plurality of input images, and the feature matching determination unit 15 performs the reference image held by the reference image holding unit 14 in the feature matching determination step. Each is collated with a plurality of input images, and the reference image symbol having the highest degree of matching is recognized. For this reason, even when the infrared camera 4 measures during the movement of the ladle 2 and the positional deviation of the individual identification symbol 3 occurs, the suitability determination can be performed with high accuracy.

実施の形態3.
図8は、本実施の形態3に係る記号識別システム1の構成を示す図であり、図1と同一または相当の部分については同一の符号を付し説明を省略する。本実施の形態3では、記号識別装置10の2次元温度データ取得部11が、赤外線カメラの測定対象領域に移動してきた取鍋2を検出して、適切なタイミングで2次元温度データを取得する構成を実現する。なお、図8では2次元温度データ取得部11の内部構成のみ示し、フィルタ処理部12、2値化処理部13、基準画像保持部14および特徴適合判定部15の図示は省略している。
Embodiment 3 FIG.
FIG. 8 is a diagram showing a configuration of the symbol identification system 1 according to the third embodiment. The same or equivalent parts as those in FIG. In the third embodiment, the two-dimensional temperature data acquisition unit 11 of the symbol identification device 10 detects the ladle 2 that has moved to the measurement target area of the infrared camera, and acquires the two-dimensional temperature data at an appropriate timing. Realize the configuration. In FIG. 8, only the internal configuration of the two-dimensional temperature data acquisition unit 11 is shown, and the filter processing unit 12, the binarization processing unit 13, the reference image holding unit 14, and the feature matching determination unit 15 are not shown.

本実施の形態3の2次元温度データ取得部11は、判定領域設定部31、接近検出部32、充/空鍋判定部(移動方向判定部)33、データ取得タイミング判定部34、2次元温度データ記憶部35および位置補正部36から構成されている。   The two-dimensional temperature data acquisition unit 11 according to the third embodiment includes a determination region setting unit 31, an approach detection unit 32, a full / empty pan determination unit (movement direction determination unit) 33, a data acquisition timing determination unit 34, and a two-dimensional temperature. The data storage unit 35 and the position correction unit 36 are included.

図8に示す記号識別システム1は、赤外線カメラ4の測定対象領域に入った取鍋2を検出して、この取鍋2の鉄皮表面の温度分布を測定するものである。図示例では取鍋2がクレーン5によって吊り上げられた状態で、矢印A,Bへ移動可能である。空の取鍋2は、矢印Aの方向へ移動して転炉または電気炉へ行き、精錬された溶鋼を受鋼する。溶鋼を収容した取鍋2は、矢印Bの方向へ移動して取鍋精錬設備へ行き、次工程として溶鋼の二次精錬が実施される。なお、取鍋2は、溶鋼の有無にかかわらず、周囲より十分に高い温度に維持されている。また、取鍋2の移動方法は、クレーン5に限定されるものではなく、任意の方法でよい。   The symbol identification system 1 shown in FIG. 8 detects the ladle 2 that has entered the measurement target area of the infrared camera 4 and measures the temperature distribution on the iron skin surface of the ladle 2. In the illustrated example, the ladle 2 can be moved to the arrows A and B while being lifted by the crane 5. The empty ladle 2 moves in the direction of arrow A, goes to the converter or electric furnace, and receives the refined molten steel. The ladle 2 containing the molten steel moves in the direction of arrow B and goes to the ladle refining facility, and the secondary refining of the molten steel is performed as the next step. The ladle 2 is maintained at a temperature sufficiently higher than the surroundings regardless of the presence or absence of molten steel. Moreover, the moving method of the ladle 2 is not limited to the crane 5, and arbitrary methods may be sufficient.

赤外線カメラ4は、取鍋2の移動経路に向けて設置されており、測定対象となる領域の温度分布を表す2次元温度データを出力する。図9に、赤外線カメラ4の測定対象領域40を示す。この測定対象領域40を赤外線カメラ4が撮像して、1つの温度測定値が1ピクセルを成す2次元温度データに変換する。なお、図9の第1判定領域41および第2判定領域42は後述する。   The infrared camera 4 is installed toward the moving path of the ladle 2 and outputs two-dimensional temperature data representing the temperature distribution of the region to be measured. FIG. 9 shows a measurement target area 40 of the infrared camera 4. The infrared camera 4 images the measurement target region 40 and converts it into two-dimensional temperature data in which one temperature measurement value forms one pixel. In addition, the 1st determination area | region 41 and the 2nd determination area | region 42 of FIG. 9 are mentioned later.

判定領域設定部31は、赤外線カメラ4の測定する2次元温度データを受け付けて、この2次元温度データに対して、取鍋2の接近、取鍋2の移動方向、溶鋼の有無(即ち、充/空)、およびデータ取得タイミングを判定するための判定領域を設定する。例えば、取鍋2が測定対象領域40上を左右方向に移動する場合を想定して、判定領域設定部31が図9に示すように赤外線カメラ4の測定した2次元温度データの中心より左側に第1判定領域41を設定し、中心より右側に第2判定領域42を設定する。
第1判定領域41と第2判定領域42を設定した2次元温度データは、判定領域設定部31から接近検出部32および充/空鍋判定部33へ出力される。
The determination area setting unit 31 receives the two-dimensional temperature data measured by the infrared camera 4 and, with respect to the two-dimensional temperature data, approaches the ladle 2, the moving direction of the ladle 2, and the presence / absence of molten steel (that is, filling / Empty), and a determination area for determining the data acquisition timing. For example, assuming that the ladle 2 moves in the left-right direction on the measurement target region 40, the determination region setting unit 31 is on the left side of the center of the two-dimensional temperature data measured by the infrared camera 4 as shown in FIG. A first determination area 41 is set, and a second determination area 42 is set on the right side of the center.
The two-dimensional temperature data in which the first determination region 41 and the second determination region 42 are set is output from the determination region setting unit 31 to the approach detection unit 32 and the full / empty pan determination unit 33.

接近検出部32は、第1判定領域41および第2判定領域42の少なくとも一方において、取鍋2の表面温度に相当する温度(以下、判定温度T1)以上のピクセルが占める割合がM%以上になるタイミングを判定し、取鍋2が赤外線カメラ4の測定対象領域40に到着したと判断する。Mは任意の値でよい。
接近検出結果は、接近検出部32からデータ取得タイミング判定部34へ出力される。
In the approach detection unit 32, in at least one of the first determination region 41 and the second determination region 42, the proportion of pixels equal to or higher than the temperature corresponding to the surface temperature of the ladle 2 (hereinafter, determination temperature T1) is M% or more. And the ladle 2 is determined to have arrived at the measurement target area 40 of the infrared camera 4. M may be any value.
The approach detection result is output from the approach detection unit 32 to the data acquisition timing determination unit 34.

充/空鍋判定部33は、判定温度T1以上のピクセルが、第1判定領域41と第2判定領域42のどちらから先に現れたかを判断し、取鍋2の移動方向と溶鋼の有無を判定するこの充/空鍋判定部33には、取鍋2の移動方向と充/空との対応関係が予め設定されており、図9の例では、矢印Aの方向のとき空、矢印Bの方向のとき充である。
判定温度T1以上のピクセルが第1判定領域41、第2判定領域42の順に現れた場合、取鍋2が矢印Aの方向へ移動していると考えられるため、充/空鍋判定部33は取鍋2が空であると判定する。反対に、判定温度T1以上のピクセルが第2判定領域42、第1判定領域41の順に現れた場合、取鍋2が矢印Bの方向へ移動していると考えられるため、充/空鍋判定部33は取鍋2が溶鋼を収容している、即ち、充であると判定する。
充/空判定結果は、充/空鍋判定部33からデータ取得タイミング判定部34へ出力される。
The full / empty pan determination unit 33 determines whether the pixel having the determination temperature T1 or higher appears first from the first determination region 41 or the second determination region 42, and determines the moving direction of the ladle 2 and the presence or absence of molten steel. In this filling / empty pan judgment unit 33, the correspondence between the moving direction of the ladle 2 and filling / empty is set in advance, and in the example of FIG. When the direction is.
When the pixels having the determination temperature T1 or higher appear in the order of the first determination region 41 and the second determination region 42, the ladle 2 is considered to be moving in the direction of the arrow A. It is determined that the ladle 2 is empty. On the other hand, when the pixels having the determination temperature T1 or higher appear in the order of the second determination region 42 and the first determination region 41, it is considered that the ladle 2 is moving in the direction of the arrow B. The part 33 determines that the ladle 2 contains molten steel, that is, is full.
The full / empty determination result is output from the full / empty pan determination unit 33 to the data acquisition timing determination unit 34.

なお、第1判定領域41と第2判定領域42に同時に判定温度T1以上のピクセルが現れた場合、充/空鍋判定部33は、判定温度T1以上のピクセル数が多い方の判定領域を先と判断して、充/空判定を行えばよい。
また、本実施の形態3では取鍋2が矢印A,Bの左右方向に移動する場合を想定しているが、上下方向に移動する取鍋2に対して移動方向を判定することも可能である。これは、予め、測定対象領域40において第1判定領域41と第2判定領域42を上下方向にずらして配置しているためである。取鍋2が上下方向に移動する場合、充/空鍋判定部33は、判定温度T1以上のピクセルが第1判定領域41、第2判定領域42の順に現れると、取鍋2が下から上方向へ移動していると判定する。一方、判定温度T1以上のピクセルが第2判定領域42、第1判定領域41の順に現れると、取鍋2が上から下方向へ移動していると判定する。また、充/空鍋判定部33に対して、上下の移動方向に応じた充/空の設定をしておき、充/空鍋判定部33がその設定に基づいて充/空の判定を行えばよい。
In addition, when the pixel more than determination temperature T1 appears simultaneously in the 1st determination area | region 41 and the 2nd determination area | region 42, the full / empty pan determination part 33 precedes the determination area | region with many pixels with the determination temperature T1 or more first. The charge / empty determination may be performed.
Moreover, in this Embodiment 3, although the case where the ladle 2 moves to the left-right direction of the arrow A and B is assumed, it is also possible to determine a moving direction with respect to the ladle 2 which moves to an up-down direction. is there. This is because the first determination region 41 and the second determination region 42 are shifted in the vertical direction in the measurement target region 40 in advance. When the ladle 2 moves in the vertical direction, the filling / empty pan determination unit 33 causes the ladle 2 to move upward from the bottom when pixels having the determination temperature T1 or higher appear in the order of the first determination region 41 and the second determination region 42. It is determined that it is moving in the direction. On the other hand, when a pixel having the determination temperature T1 or higher appears in the order of the second determination region 42 and the first determination region 41, it is determined that the ladle 2 is moving from top to bottom. In addition, the filling / empty pan determination unit 33 is set to fill / empty according to the up and down movement direction, and the filling / empty pan determination unit 33 performs the filling / empty determination based on the setting. Just do it.

データ取得タイミング判定部34は、接近検出部32から取鍋2の接近を通知された時点から2次元温度データを一時的に保持していく。また、データ取得タイミング判定部34は、第1判定領域41および第2判定領域42の両方において判定温度T1以上のピクセルがLピクセル以上になるタイミングを判定し、このタイミングの2次元温度データを2次元温度データ記憶部35に記憶する。Lは、取鍋2が赤外線カメラ4の測定対象領域40(即ち、2次元温度データ)の中心位置に存在するときの値を目安に設定しておけばよい。なお、充/空鍋判定部33の判定結果に従って、取鍋2が空のときと充のときとでLの値を可変にしてもよい。   The data acquisition timing determination unit 34 temporarily holds the two-dimensional temperature data from the time when the approach detection unit 32 is notified of the approach of the ladle 2. In addition, the data acquisition timing determination unit 34 determines the timing at which the pixels having the determination temperature T1 or more become L pixels or more in both the first determination region 41 and the second determination region 42, and the two-dimensional temperature data at this timing is 2 This is stored in the dimension temperature data storage unit 35. L may be set with reference to a value when the ladle 2 is present at the center position of the measurement target region 40 of the infrared camera 4 (that is, two-dimensional temperature data). In addition, according to the determination result of the full / empty pan determination part 33, you may make the value of L variable when the ladle 2 is empty and when it is full.

ただし、データ取得タイミング判定部34は、上記の条件に至らなかった場合、接近検出部32が取鍋2の接近を検出したタイミングから所定時間t1の経過後にタイムアウトする。この場合、データ取得タイミング判定部34は、一時的に保持している2次元温度データのうち、第1判定領域41と第2判定領域42の判定温度T1以上の合計ピクセル数が一番大きい2次元温度データを採用して、2次元温度データ記憶部35に記憶する。さらに、2次元温度データの正常な取得に失敗した旨をデータ取得タイミング判定部34から外部出力してもよい。   However, if the above condition is not reached, the data acquisition timing determination unit 34 times out after the elapse of the predetermined time t1 from the timing when the approach detection unit 32 detects the approach of the ladle 2. In this case, the data acquisition timing determination unit 34 has the largest total number of pixels equal to or higher than the determination temperature T1 of the first determination region 41 and the second determination region 42 among the two-dimensional temperature data temporarily held. The two-dimensional temperature data storage unit 35 stores the two-dimensional temperature data. Further, the fact that the normal acquisition of the two-dimensional temperature data has failed may be output from the data acquisition timing determination unit 34 to the outside.

また、データ取得タイミング判定部34は、上記の条件に至った後、第1判定領域41および第2判定領域42の両方において判定温度T1以上のピクセルがLピクセル以下になる時間が所定時間t2連続した場合、取鍋2が赤外線カメラ4の測定対象領域40を通り過ぎたと判断して、判定処理を終了すると共に2次元温度データの一時保持も終了する。また、この場合に、データ取得タイミング判定部34から接近検出部32へ指示を出して接近検出処理を所定時間t2だけ中断させ、この取鍋2を接近検出部32で誤って再検出しないようにしてもよい。   In addition, after reaching the above condition, the data acquisition timing determination unit 34 continues for a predetermined time t2 when the pixels having the determination temperature T1 or more become L pixels or less in both the first determination region 41 and the second determination region 42. In this case, it is determined that the ladle 2 has passed the measurement target region 40 of the infrared camera 4, and the determination process is terminated and the temporary holding of the two-dimensional temperature data is also terminated. Further, in this case, an instruction is issued from the data acquisition timing determination unit 34 to the approach detection unit 32 to interrupt the approach detection process for a predetermined time t2, so that the ladle 2 is not erroneously re-detected by the approach detection unit 32. May be.

また、データ取得タイミング判定部34は、上記の条件に至った後、第1判定領域41および第2判定領域42の少なくとも一方において判定温度T1以上のピクセルがLピクセル以上の時間が所定時間t3連続した場合、取鍋2が移動していないと判断するようにしてもよい。また、この場合に、データ取得タイミング判定部34から接近検出部32へ指示を出し、次の取鍋2の接近検出処理を中断するようにしてもよい。   In addition, after reaching the above condition, the data acquisition timing determination unit 34 continues for a predetermined time t3 during which at least one of the first determination region 41 and the second determination region 42 has a pixel that is equal to or higher than the determination temperature T1 for L pixels or more. When it does, you may make it judge that the ladle 2 is not moving. In this case, an instruction may be issued from the data acquisition timing determination unit 34 to the approach detection unit 32 to interrupt the next approach detection process of the ladle 2.

位置補正部36は、2次元温度データ記憶部35が記憶している2次元温度データをセンタリング補正して、取鍋2の表面温度を表すデータ群を2次元温度データの中心に揃える。図10は、2次元温度データ50に対する上下方向のセンタリング補正を説明する図であり、図11は左右方向のセンタリング補正を説明する図である。図10および図11において、2次元温度データ50は、温度が高い領域を白色で表し、温度が低くなるほど黒くなる。   The position correction unit 36 performs centering correction on the two-dimensional temperature data stored in the two-dimensional temperature data storage unit 35, and aligns a data group representing the surface temperature of the ladle 2 with the center of the two-dimensional temperature data. FIG. 10 is a diagram for explaining the vertical centering correction for the two-dimensional temperature data 50, and FIG. 11 is a diagram for explaining the horizontal centering correction. 10 and 11, the two-dimensional temperature data 50 represents a region where the temperature is high in white, and becomes black as the temperature decreases.

(1)上下センタリング
図10(a)に示すように、位置補正部36は、2次元温度データ50の中心に左右幅Pピクセルの判定スリット51を設定して、上方向および下方向へそれぞれ移動させていく。上方向への移動中に、この判定スリット51に含まれるPピクセルのうち、判定温度T1×α(例えば、α=0.7〜1.5)より低い温度のピクセル数がP/3になるY軸を、Y1とする。同様に、下方向への移動中に、判定スリット51に含まれるPピクセルのうち、判定温度T1×αより低い温度のピクセル数がP/3になるY軸を、Y2とする。最後に、位置補正部36は、Y1とY2の中間点が2次元温度データ50の中心になるようセンタリングして、図10(b)の2次元温度データ50aにする。なお、図10(b)の斜線領域は、2次元温度データ50をセンタリングした際に補間したデータ領域である。
(1) Vertical Centering As shown in FIG. 10A, the position correction unit 36 sets a determination slit 51 of a left-right width P pixel at the center of the two-dimensional temperature data 50 and moves upward and downward, respectively. I will let you. During the upward movement, the number of pixels having a temperature lower than the determination temperature T1 × α (for example, α = 0.7 to 1.5) among the P pixels included in the determination slit 51 becomes P / 3. The Y axis is Y1. Similarly, the Y axis where the number of pixels having a temperature lower than the determination temperature T1 × α among the P pixels included in the determination slit 51 during the downward movement is P / 3 is Y2. Finally, the position correction unit 36 performs centering so that the intermediate point between Y1 and Y2 is the center of the two-dimensional temperature data 50, thereby obtaining the two-dimensional temperature data 50a in FIG. 10B is a data area interpolated when the two-dimensional temperature data 50 is centered.

(2)左右センタリング
図11(a)に示すように、位置補正部36は、2次元温度データ50aの左端および右端にそれぞれ上下幅Qピクセルの判定スリット52,53を設定して、右方向および左方向へ移動させていく。判定スリット52の左方向への移動中に、この判定スリット52に含まれるQピクセルのうち、判定温度T1×αより高い温度のピクセル数がQ/3×2以上になるX軸を、X1とする。同様に、判定スリット53の右方向への移動中に、この判定スリット53に含まれるQピクセルのうち、判定温度T1×αより高い温度のピクセル数がQ/3×2以上になるX軸を、X2とする。最後に、位置補正部36は、X1とX2の中間点が2次元温度データ50aの中心になるようセンタリングして、図11(b)の2次元温度データ50bにする。
なお、P,Q等の各種の数値は任意でよい。
(2) Left / Right Centering As shown in FIG. 11 (a), the position correction unit 36 sets determination slits 52 and 53 having vertical Q pixels at the left end and the right end of the two-dimensional temperature data 50a, respectively, Move to the left. During the movement of the determination slit 52 in the left direction, among the Q pixels included in the determination slit 52, an X axis where the number of pixels having a temperature higher than the determination temperature T1 × α is Q / 3 × 2 or more is denoted by X1. To do. Similarly, during the movement of the determination slit 53 in the right direction, among the Q pixels included in the determination slit 53, the X-axis where the number of pixels having a temperature higher than the determination temperature T1 × α is Q / 3 × 2 or more. , X2. Finally, the position correction unit 36 performs centering so that the intermediate point between X1 and X2 is the center of the two-dimensional temperature data 50a to obtain the two-dimensional temperature data 50b in FIG.
Various numerical values such as P and Q may be arbitrary.

なお、2次元温度データ取得部11は、以上の処理を終えた2次元温度データ50bから、上記実施の形態1,2で説明したように個体識別用の記号3を含む所定のデータ範囲(記号識別領域21)を抽出して、フィルタ処理部12へ出力する。   The two-dimensional temperature data acquisition unit 11 uses a predetermined data range (symbols) including the individual identification symbol 3 from the two-dimensional temperature data 50b after the above processing as described in the first and second embodiments. The identification area 21) is extracted and output to the filter processing unit 12.

以上より、実施の形態3によれば、記号識別装置10は、取鍋2の移動経路に向けて設置された赤外線カメラ4から入力される2次元温度データに対して、判定領域設定部31がこの移動経路に相当する位置に第1判定領域41および第2判定領域42を設定する判定領域設定ステップと、データ取得タイミング判定部34が第1判定領域41および第2判定領域42の両方において所定の判定温度T1以上の温度データ群が所定面積(Lピクセル)以上になるタイミングを判定するデータ取得タイミング判定ステップと、データ取得タイミング判定ステップで判定したタイミングの2次元温度データを2次元温度データ記憶部35に記憶するデータ取得ステップとからなる取鍋検出方法を実施するように構成した。このため、2次元温度データに設定した2つの判定領域を監視して、取鍋2の表面温度に相当する温度データ群の面積に基づいて取鍋2が赤外線カメラ4に対して適切な位置に移動したことを検出することができ、適切なタイミングで2次元温度データを取得し記憶することができる。これにより、移動中の取鍋2に相当する温度データ群が毎回同じ位置に出現する2次元温度データを用いて、取鍋2の個体識別を行ったり、溶鋼の漏洩の可能性を予測したりすることが可能となる。   As described above, according to the third embodiment, the symbol identification device 10 has the determination region setting unit 31 for the two-dimensional temperature data input from the infrared camera 4 installed toward the moving path of the ladle 2. A determination region setting step for setting the first determination region 41 and the second determination region 42 at a position corresponding to the movement route, and the data acquisition timing determination unit 34 in both the first determination region 41 and the second determination region 42 are predetermined. A data acquisition timing determination step for determining a timing at which a temperature data group equal to or higher than the determination temperature T1 exceeds a predetermined area (L pixel), and two-dimensional temperature data at the timing determined in the data acquisition timing determination step are stored as two-dimensional temperature data The ladle detection method comprising the data acquisition step stored in the unit 35 is implemented. For this reason, the two determination regions set in the two-dimensional temperature data are monitored, and the ladle 2 is placed at an appropriate position with respect to the infrared camera 4 based on the area of the temperature data group corresponding to the surface temperature of the ladle 2. It is possible to detect the movement, and to acquire and store two-dimensional temperature data at an appropriate timing. Thereby, using the two-dimensional temperature data in which the temperature data group corresponding to the moving ladle 2 appears at the same position every time, individual identification of the ladle 2 is performed, or the possibility of leakage of molten steel is predicted. It becomes possible to do.

また、実施の形態3によれば、充/空鍋判定部33が、判定領域設定ステップで設定した第1判定領域41および第2判定領域42に判定温度T1以上の温度データが出現する順番に基づいて、取鍋2の移動方向を判定し、移動方向に応じて溶鋼の有無を判定する移動方向判定ステップを実施するように構成した。このため、赤外線カメラ4の測定する2次元温度データを流用して、取鍋2が空か充かの状態判定を行うことができる。   Further, according to the third embodiment, the filling / empty pan determination unit 33 in the order in which the temperature data equal to or higher than the determination temperature T1 appears in the first determination region 41 and the second determination region 42 set in the determination region setting step. Based on this, the moving direction of the ladle 2 is determined, and a moving direction determining step for determining the presence or absence of molten steel according to the moving direction is performed. For this reason, it is possible to determine whether the ladle 2 is empty or not by using the two-dimensional temperature data measured by the infrared camera 4.

また、実施の形態3によれば、位置補正部36が、データ取得タイミング判定ステップで判定したタイミングの2次元温度データを、判定温度T1以上の温度データ群が中心位置になるようセンタリングするセンタリング補正ステップを実施するように構成した。このため、2次元温度データを取得するタイミングが多少ずれたとしても、位置補正して、移動中の取鍋2に相当する温度データ群が毎回同じ位置に出現する2次元温度データを提供することができる。   Further, according to the third embodiment, the position correction unit 36 centers the two-dimensional temperature data determined at the data acquisition timing determination step so that the temperature data group equal to or higher than the determination temperature T1 is at the center position. Configured to perform steps. For this reason, even if the timing for acquiring the two-dimensional temperature data is slightly shifted, the position correction is performed, and two-dimensional temperature data in which the temperature data group corresponding to the moving ladle 2 appears at the same position is provided. Can do.

なお、第1判定領域41と第2判定領域42の設定例は図9に限定されるものではない。以下に、図12を参照して別の設定例を説明する。
赤外線カメラ4の測定対象領域40に対して左右方向に移動する取鍋2を検出する場合、判定領域設定部31は、図12(a)に示すように、第1判定領域41と第2判定領域42を左右に並べた状態に設定する。この設定例の場合、充/空鍋判定部33は、判定温度T1以上のピクセルが、第1判定領域41と第2判定領域42のどちらから先に現れたかを判断し、取鍋2が左右どちらの方向に移動しているか判定する。
The setting example of the first determination area 41 and the second determination area 42 is not limited to FIG. Hereinafter, another setting example will be described with reference to FIG.
When detecting the ladle 2 that moves in the left-right direction with respect to the measurement target area 40 of the infrared camera 4, the determination area setting unit 31 performs the first determination area 41 and the second determination as shown in FIG. The region 42 is set in a state in which it is arranged side by side. In the case of this setting example, the full / empty pan determination unit 33 determines whether the pixel having the determination temperature T1 or higher appears first from the first determination region 41 or the second determination region 42, and the ladle 2 is left and right. Determine which direction you are moving.

一方、赤外線カメラ4の測定対象領域40に対して上下方向に移動する取鍋2を検出する場合、判定領域設定部31は、図12(b)に示すように、第1判定領域41と第2判定領域42を上下に並べた状態にする。この設定例の場合、充/空鍋判定部33は、判定温度T1以上のピクセルが、第1判定領域41と第2判定領域42のどちらから先に現れたかを判断し、取鍋2が上下どちらの方向に移動しているか判定する。   On the other hand, when detecting the ladle 2 that moves in the vertical direction with respect to the measurement target region 40 of the infrared camera 4, the determination region setting unit 31 includes the first determination region 41 and the first determination region 41 as shown in FIG. 2 The determination areas 42 are arranged in the vertical direction. In the case of this setting example, the full / empty pan determination unit 33 determines whether the pixel having the determination temperature T1 or higher appears first from the first determination region 41 or the second determination region 42, and the ladle 2 is moved up and down. Determine which direction you are moving.

あるいは、図12(c)に示すように、第1判定領域41と第2判定領域42を上下に並べ、かつ、左右にずらした状態にしてもよい。この場合、図9と同様、赤外線カメラ4の測定対象領域40に対して上下方向、左右方向および斜め方向に移動する取鍋2を検出することが可能である。   Alternatively, as shown in FIG. 12C, the first determination area 41 and the second determination area 42 may be arranged vertically and shifted left and right. In this case, similarly to FIG. 9, it is possible to detect the ladle 2 that moves in the vertical direction, the horizontal direction, and the diagonal direction with respect to the measurement target region 40 of the infrared camera 4.

実施の形態4.
本実施の形態4に示す2次元温度データ取得部11は、上記実施の形態3の図8と図面上では同様の構成であるため、以下では図8を援用して説明する。
複数台の赤外線カメラ4を用いて取鍋2の表面温度を測定する場合、2次元温度データ取得部11が赤外線カメラ4それぞれについて上記実施の形態3の処理を行ってもよいし、あるいは、1台の赤外線カメラ4に対してのみ上記実施の形態3の処理を行い、残りの赤外線カメラ(以下、連動用赤外線カメラ4aと称す)は赤外線カメラ4に連動した処理を行ってもよい。本実施の形態4では、連動した処理の例として、(1)接近トリガ連動モードおよび(2)データ取得トリガ連動モードの2通り説明する。なお、赤外線カメラ4がメインカメラに相当し、連動用赤外線カメラ4aが連動用カメラに相当する。
Embodiment 4 FIG.
Since the two-dimensional temperature data acquisition unit 11 shown in the fourth embodiment has the same configuration as that of the third embodiment shown in FIG. 8, the following description will be given with reference to FIG. 8.
When the surface temperature of the ladle 2 is measured using a plurality of infrared cameras 4, the two-dimensional temperature data acquisition unit 11 may perform the processing of Embodiment 3 for each of the infrared cameras 4, or 1 The processing of the third embodiment may be performed only for one infrared camera 4, and the remaining infrared cameras (hereinafter referred to as linked infrared camera 4 a) may perform processing linked to the infrared camera 4. In the fourth embodiment, as an example of linked processing, (1) approach trigger interlocking mode and (2) data acquisition trigger interlocking mode will be described. The infrared camera 4 corresponds to the main camera, and the interlocking infrared camera 4a corresponds to the interlocking camera.

(1)接近トリガ連動モード
判定領域設定部31は、赤外線カメラ4および連動用赤外線カメラ4aそれぞれの2次元温度データを受け付け、カメラ毎に第1判定領域41および第2判定領域42を設定する。
接近検出部32は、赤外線カメラ4の2次元温度データに設定した第1判定領域41および第2判定領域42に基づいて取鍋2の接近を検出し、赤外線カメラ4および連動用赤外線カメラ4aの両方の接近検出結果としてデータ取得タイミング判定部34に通知する。データ取得タイミング判定部34は、接近検出部32から取鍋2の接近を通知された時点から、カメラ毎にデータ取得タイミングの判定処理を開始し、カメラ毎の2次元温度データを2次元温度データ記憶部34に記憶させる。
(1) Approach trigger interlocking mode The determination area setting unit 31 receives the two-dimensional temperature data of each of the infrared camera 4 and the interlocking infrared camera 4a, and sets the first determination area 41 and the second determination area 42 for each camera.
The approach detection unit 32 detects the approach of the ladle 2 based on the first determination region 41 and the second determination region 42 set in the two-dimensional temperature data of the infrared camera 4, and the infrared camera 4 and the interlocking infrared camera 4a. The data acquisition timing determination unit 34 is notified as both approach detection results. The data acquisition timing determination unit 34 starts the data acquisition timing determination process for each camera from the time when the approach detection unit 32 is notified of the approach of the ladle 2, and converts the two-dimensional temperature data for each camera into the two-dimensional temperature data. The data is stored in the storage unit 34.

接近トリガ連動モードの場合、赤外線カメラ4への取鍋2の接近を、連動用赤外線カメラ4aへの接近とも見なすため、例えば、連動用赤外線カメラ4aが取鍋2の接近を誤検出しやすい環境に設置されていてもその動作を補助することができる。そのため、接近検出に続く2次元温度データの取得タイミング判定処理を確実に実施でき、連動用赤外線カメラ4aの2次元温度データの取得失敗を防止できる。   In the approach trigger interlock mode, since the approach of the ladle 2 to the infrared camera 4 is also regarded as the approach to the interlocking infrared camera 4a, for example, the environment in which the interlocking infrared camera 4a is likely to erroneously detect the approach of the ladle 2 Even if it is installed, it can assist its operation. Therefore, the two-dimensional temperature data acquisition timing determination process following the approach detection can be reliably performed, and the two-dimensional temperature data acquisition failure of the interlocking infrared camera 4a can be prevented.

(2)データ取得トリガ連動モード
判定領域設定部31は、赤外線カメラ4および連動用赤外線カメラ4aそれぞれの2次元温度データを受け付け、赤外線カメラ4の2次元温度データにのみ第1判定領域41および第2判定領域42を設定する。
接近検出部32は、赤外線カメラ4の2次元温度データに設定した第1判定領域41および第2判定領域42に基づいて取鍋2の接近を検出し、データ取得タイミング判定部34に通知する。データ取得タイミング判定部34は、接近検出部32から取鍋2の接近を通知された時点から赤外線カメラ4のデータ取得タイミングの判定処理を開始し、このデータ取得タイミングで赤外線カメラ4および連動用赤外線カメラ4aの各2次元温度データを2次元温度データ記憶部34に記憶させる。
(2) Data Acquisition Trigger Interlocking Mode The determination area setting unit 31 receives the two-dimensional temperature data of each of the infrared camera 4 and the interlocking infrared camera 4a. Only the two-dimensional temperature data of the infrared camera 4 includes the first determination area 41 and the first determination area 41. 2 The determination area 42 is set.
The approach detection unit 32 detects the approach of the ladle 2 based on the first determination region 41 and the second determination region 42 set in the two-dimensional temperature data of the infrared camera 4 and notifies the data acquisition timing determination unit 34. The data acquisition timing determination unit 34 starts determination processing of the data acquisition timing of the infrared camera 4 from the time when the approach detection unit 32 is notified of the approach of the ladle 2, and at this data acquisition timing, the infrared camera 4 and the interlocking infrared rays are started. Each two-dimensional temperature data of the camera 4a is stored in the two-dimensional temperature data storage unit 34.

データ取得トリガ連動モードの場合、赤外線カメラ4のデータ取得タイミングを、連動用赤外線カメラ4aのデータ取得タイミングとも見なすため、例えば、連動用赤外線カメラ4aが取鍋2の接近を誤検出しやすい、またはデータ取得タイミングを誤判定しやすい環境に設置されていてもその動作を補助することができる。そのため、連動用赤外線カメラ4aの2次元温度データをより確実に取得できる。また、(1)接近トリガ連動モードに比べて、記号識別装置10の処理をより軽減できる。   In the data acquisition trigger interlocking mode, the data acquisition timing of the infrared camera 4 is also regarded as the data acquisition timing of the interlocking infrared camera 4a. For example, the interlocking infrared camera 4a easily detects the approach of the ladle 2 or Even if it is installed in an environment where it is easy to misjudge the data acquisition timing, the operation can be assisted. Therefore, the two-dimensional temperature data of the interlocking infrared camera 4a can be acquired more reliably. Further, (1) the processing of the symbol identification device 10 can be further reduced as compared with the approach trigger interlocking mode.

なお、充/空鍋判定部33は、複数カメラのうち、代表してメインの赤外線カメラ4のみ充/空判定を行えばよい。一方、位置補正部36は、2次元温度データ記憶部34に記憶されたカメラ毎の2次元温度データに対してそれぞれセンタリング補正を行う。これにより、連動用赤外線カメラ4aの2次元温度データの取得タイミングが最適なタイミングから多少ずれたとしても、取鍋2の表面温度を表すデータ群が中心位置に配置された2次元温度データを得ることができる。   The full / empty pan determination unit 33 may perform the full / empty determination only for the main infrared camera 4 as a representative of the plurality of cameras. On the other hand, the position correction unit 36 performs centering correction on the two-dimensional temperature data for each camera stored in the two-dimensional temperature data storage unit 34. Thereby, even if the acquisition timing of the two-dimensional temperature data of the interlocking infrared camera 4a slightly deviates from the optimal timing, two-dimensional temperature data in which the data group representing the surface temperature of the ladle 2 is arranged at the center position is obtained. be able to.

以上より、実施の形態4によれば、記号識別装置10は接近トリガ連動モードにおいて、取鍋2の移動経路に向けて設置された複数の赤外線カメラのうちの1台を赤外線カメラ4、残りを連動用赤外線カメラ4aとし、判定領域設定部31が当該赤外線カメラ4から入力される2次元温度データの移動経路に相当する位置に第1判定領域41および第2判定領域42を設定すると共に、当該連動用赤外線カメラ4aから入力される2次元温度データの移動経路に相当する位置に第1判定領域41および第2判定領域42を設定する判定領域設定ステップと、接近検出部32が赤外線カメラ4の2次元温度データに対して設定された第1判定領域41および第2判定領域42の少なくとも一方に、所定の判定温度T1以上の温度データの(M%以上の)出現を検出して赤外線カメラ4への取鍋2の接近を判定する接近検出ステップと、接近検出ステップで接近を判定した場合に、データ取得タイミング判定部34が赤外線カメラ4の2次元温度データに対して設定された第1判定領域41および第2判定領域42の両方において判定温度T1以上の温度データ群が所定面積(Lピクセル)以上になるタイミングを判定すると共に、連動用赤外線カメラ4aの2次元温度データに対して設定された第1判定領域41および第2判定領域42の両方において判定温度T1以上の温度データ群が所定面積(Lピクセル)以上になるタイミングを判定するデータ取得タイミング判定ステップと、データ取得タイミング判定ステップで判定した各タイミングの赤外線カメラ4の2次元温度データおよび連動用赤外線カメラ4aの2次元温度データをそれぞれ2次元温度データ記憶部34に記憶するデータ取得ステップとを実施するように構成した。このため、取鍋2の接近を誤検出しやすい環境に設置された連動用赤外線カメラ4aを補助することができるようになり、赤外線カメラ4だけでなく連動用赤外線カメラ4aの2次元温度データも適切なタイミングで取得し記憶することができる。   As described above, according to the fourth embodiment, in the approach trigger interlocking mode, the symbol identification device 10 uses one of the plurality of infrared cameras installed toward the moving path of the ladle 2 as the infrared camera 4 and the remaining as the remaining one. As the interlocking infrared camera 4a, the determination area setting unit 31 sets the first determination area 41 and the second determination area 42 at a position corresponding to the movement path of the two-dimensional temperature data input from the infrared camera 4, and A determination region setting step for setting the first determination region 41 and the second determination region 42 at a position corresponding to the movement path of the two-dimensional temperature data input from the interlocking infrared camera 4 a, and the approach detection unit 32 of the infrared camera 4 In at least one of the first determination area 41 and the second determination area 42 set for the two-dimensional temperature data, (M%) of temperature data equal to or higher than a predetermined determination temperature T1. When the appearance is detected and the approach detection step determines the approach of the ladle 2 to the infrared camera 4 and the approach detection step determines the approach, the data acquisition timing determination unit 34 determines whether the infrared camera 4 is two-dimensional. In both the first determination area 41 and the second determination area 42 set for the temperature data, the timing at which the temperature data group equal to or higher than the determination temperature T1 becomes equal to or greater than a predetermined area (L pixel) is determined, and the interlocking infrared camera Data acquisition for determining the timing at which the temperature data group equal to or higher than the determination temperature T1 exceeds the predetermined area (L pixel) in both the first determination area 41 and the second determination area 42 set for the two-dimensional temperature data of 4a. Two-dimensional temperature data of the infrared camera 4 at each timing determined in the timing determination step and the data acquisition timing determination step And a data acquisition step of storing the 2-dimensional temperature data of the pre-interlocking infrared camera 4a in each two-dimensional temperature data storage unit 34 is configured to implement. For this reason, it becomes possible to assist the interlocking infrared camera 4a installed in an environment in which the approach of the ladle 2 is likely to be erroneously detected, and not only the infrared camera 4 but also the two-dimensional temperature data of the interlocking infrared camera 4a. It can be acquired and stored at an appropriate timing.

また、実施の形態4によれば、記号識別装置10はデータ取得トリガ連動モードにおいて、取鍋2の移動経路に向けて設置された複数の赤外線カメラのうちの1台を赤外線カメラ4、残りを連動用赤外線カメラ4aとし、判定領域設定部31が当該赤外線カメラ4から入力される2次元温度データの移動経路に相当する位置に第1判定領域41および第2判定領域42を設定する判定領域設定ステップと、データ取得タイミング判定部34が赤外線カメラ4の2次元温度データに対して設定された第1判定領域41および第2判定領域42の両方において判定温度T1以上の温度データ群が所定面積(Lピクセル)以上になるタイミングを判定するデータ取得タイミング判定ステップと、データ取得タイミングで判定したタイミングの赤外線カメラ4の2次元温度データおよび連動用赤外線カメラ4aの2次元温度データをそれぞれ2次元温度データ記憶部34に記憶するデータ取得ステップとを実施するように構成した。このため、取鍋2の接近の誤検出およびデータ取得タイミングを誤判定しやすい環境に設置された連動用赤外線カメラ4aを補助することができるようになり、赤外線カメラ4だけでなく連動用赤外線カメラ4aの2次元温度データも適切なタイミングで取得し記憶することができる。   Further, according to the fourth embodiment, in the data acquisition trigger interlocking mode, the symbol identification device 10 sets one of the plurality of infrared cameras installed toward the moving path of the ladle 2 as the infrared camera 4 and the remaining as the remaining one. The determination infrared region 4a is set as the interlocking infrared camera 4a, and the determination region setting unit 31 sets the first determination region 41 and the second determination region 42 at a position corresponding to the movement path of the two-dimensional temperature data input from the infrared camera 4. In both the first determination area 41 and the second determination area 42 set by the step and the data acquisition timing determination unit 34 for the two-dimensional temperature data of the infrared camera 4, a temperature data group equal to or higher than the determination temperature T <b> 1 has a predetermined area ( L pixel) data acquisition timing determination step for determining the above timing, and infrared at the timing determined by the data acquisition timing And configured to perform a data obtaining step of storing camera 4 of the two-dimensional temperature data and the two-dimensional temperature data interlocking infrared camera 4a in each two-dimensional temperature data storage unit 34. For this reason, it becomes possible to assist the interlocking infrared camera 4a installed in an environment in which erroneous detection of the approach of the ladle 2 and data acquisition timing can be easily determined, and not only the infrared camera 4 but also the interlocking infrared camera. The two-dimensional temperature data 4a can also be acquired and stored at an appropriate timing.

実施の形態5.
図13は、本実施の形態5に係る記号識別装置10のうち、2次元温度データ取得部11の内部構成を示すブロック図である。なお、図13において図8と同一または相当の部分については同一の符号を付し説明を省略する。また、図14に、本実施の形態5に係る記号識別装置10が用いる赤外線カメラ4の測定対象領域40を示す。本実施の形態5では、図14に示すように取鍋2が矢印Cの上下方向に移動する場合を想定し、さらに、この取鍋2の移動経路上に取鍋2以外の異物(検出対象外の別の取鍋など)の移動経路が一部重なる場合を想定する。例として、異物の移動経路は矢印Dの左右方向とする。
Embodiment 5 FIG.
FIG. 13 is a block diagram illustrating an internal configuration of the two-dimensional temperature data acquisition unit 11 in the symbol identification device 10 according to the fifth embodiment. 13 that are the same as or equivalent to those in FIG. 8 are given the same reference numerals, and descriptions thereof are omitted. FIG. 14 shows a measurement target region 40 of the infrared camera 4 used by the symbol identification device 10 according to the fifth embodiment. In the fifth embodiment, it is assumed that the ladle 2 moves in the vertical direction of the arrow C as shown in FIG. 14, and further, a foreign object other than the ladle 2 (detection target) on the movement path of the ladle 2. Assume that the moving routes of other ladles etc. overlap partially. As an example, the movement path of the foreign object is the left-right direction of the arrow D.

図13に示す記号識別装置10において、判定領域設定部31aは、図14に示すように取鍋2の接近、充/空判定およびデータ取得タイミングを判定するための判定領域となる第1判定領域41および第2判定領域42を、赤外線カメラ4の測定対象領域40に設定する。これに加え、判定領域設定部31aは異物を検出するための判定領域となる異物判定領域43,44を、測定対象領域40に設定する。異物判定領域43,44は、想定される異物の移動経路上に少なくとも1箇所設定すればよい。   In the symbol identification device 10 illustrated in FIG. 13, the determination region setting unit 31 a is a first determination region serving as a determination region for determining the approach of the ladle 2, the full / empty determination, and the data acquisition timing as illustrated in FIG. 14. 41 and the second determination area 42 are set in the measurement target area 40 of the infrared camera 4. In addition, the determination area setting unit 31a sets the foreign object determination areas 43 and 44, which are determination areas for detecting a foreign object, in the measurement target area 40. The foreign matter determination areas 43 and 44 may be set at least one place on the assumed foreign matter movement path.

異物検出部37は、異物判定領域43,44の少なくとも一方において、異物に相当する温度(以下、判定温度T2)以上のピクセルがRピクセル以上になった場合、異物が赤外線カメラ4の測定対象領域40を移動中であると判定して、データ取得タイミング判定部34aに通知する。Rは任意の値でよい。   When at least one of the foreign substance determination areas 43 and 44 has a pixel equal to or higher than the temperature corresponding to the foreign substance (hereinafter referred to as a determination temperature T2), the foreign object detection unit 37 detects the foreign object as the measurement target area of the infrared camera 4. 40 is determined to be moving, and is notified to the data acquisition timing determination unit 34a. R may be any value.

データ取得タイミング判定部34aは、接近検出部32から取鍋2の接近を通知された時点からデータ取得タイミングの判定を開始するが、異物検出部37から異物検出が通知された場合は所定時間t4だけこの判定を中断する。よって、所定時間t4の間、2次元温度データ記憶部35が2次元温度データを記憶しない。これにより、取鍋2以外の異物が第1判定領域41および第2判定領域42に入っている最中に測定された2次元温度データを、誤って取得し記憶することを防止できる。   The data acquisition timing determination unit 34a starts the determination of the data acquisition timing from the time when the approach detection unit 32 is notified of the approach of the ladle 2, but when the foreign object detection is notified from the foreign object detection unit 37, the predetermined time t4. Only interrupt this decision. Therefore, the two-dimensional temperature data storage unit 35 does not store the two-dimensional temperature data for a predetermined time t4. Thereby, it is possible to prevent the two-dimensional temperature data measured while foreign substances other than the ladle 2 are in the first determination area 41 and the second determination area 42 from being erroneously acquired and stored.

以上より、実施の形態5によれば、判定領域設定部31aは、取鍋2の移動経路と異物の移動経路とが一部重なる場合に、赤外線カメラ4が出力する2次元温度データの、異物の移動経路に相当する位置に異物判定領域43,44を設定し、異物検出部37がこれら異物判定領域43,44において所定の判定温度T2以上の温度データ群が所定面積(Rピクセル)以上になった場合に異物と判定する異物検出ステップを備え、データ取得タイミング判定部34aは、異物検出ステップで異物を検出した場合にデータ取得タイミングの判定処理を中断するように構成した。このため、取鍋2と誤って異物の表面温度を測定した2次元温度データを、2次元温度データ記憶部34に取得し記憶することを防止できる。   As described above, according to the fifth embodiment, the determination region setting unit 31a has the foreign object of the two-dimensional temperature data output from the infrared camera 4 when the movement path of the ladle 2 and the movement path of the foreign object partially overlap. The foreign matter determination areas 43 and 44 are set at positions corresponding to the movement path of the foreign matter, and the foreign matter detection unit 37 has a temperature data group equal to or higher than a predetermined determination temperature T2 in the foreign matter determination areas 43 and 44 to a predetermined area (R pixel) or more. A foreign matter detection step for determining a foreign matter when the foreign matter is detected, and the data acquisition timing determination unit 34a is configured to interrupt the data acquisition timing determination process when a foreign matter is detected in the foreign matter detection step. For this reason, it is possible to prevent the two-dimensional temperature data storage unit 34 from acquiring and storing the two-dimensional temperature data obtained by measuring the surface temperature of the foreign object by mistake with the ladle 2.

なお、本発明の実施形態を図面を参照して詳述してきたが、具体的な構成は、上述した実施の形態の構成に限られるものではなく、本発明の要旨を逸脱しない範囲の設計の変更などがあっても本発明に含まれることは言うまでもない。
また、本発明の記号識別方法を、取鍋の個体識別に用いる場合を例に説明したが、これに限定されるものではなく、取鍋以外の対象物に対しても適用可能である。
Although the embodiment of the present invention has been described in detail with reference to the drawings, the specific configuration is not limited to the configuration of the above-described embodiment, and the design does not depart from the gist of the present invention. Needless to say, changes and the like are included in the present invention.
Moreover, although the case where the symbol identification method of this invention is used for the individual identification of a ladle was demonstrated to the example, it is not limited to this, It can apply also to objects other than a ladle.

1 記号識別システム
2 取鍋
3 個体識別用の記号
4 赤外線カメラ
5 クレーン
10 記号識別装置
11 2次元温度データ取得部
12 フィルタ処理部
13 2値化処理部
14 基準画像保持部
15 特徴適合判定部
20 2次元温度データ
21,21−1〜21−9 記号識別領域
31 判定領域設定部
32 接近検出部
33 充/空鍋判定部
34 データ取得タイミング判定部
35 2次元温度データ記憶部
36 位置補正部
37 異物検出部
40 測定対象領域
41 第1判定領域
42 第2判定領域
43,44 異物判定領域
50 2次元温度データ
51〜53 判定スリット
DESCRIPTION OF SYMBOLS 1 Symbol identification system 2 Ladle 3 Symbol for individual identification 4 Infrared camera 5 Crane 10 Symbol identification device 11 Two-dimensional temperature data acquisition part 12 Filter processing part 13 Binarization processing part 14 Reference | standard image holding part 15 Feature conformity judgment part 20 Two-dimensional temperature data 21, 21-1 to 21-9 Symbol identification region 31 Determination region setting unit 32 Approach detection unit 33 Filling / empty pan determination unit 34 Data acquisition timing determination unit 35 Two-dimensional temperature data storage unit 36 Position correction unit 37 Foreign object detector 40 Measurement target area 41 First determination area 42 Second determination area 43, 44 Foreign object determination area 50 Two-dimensional temperature data 51-53 Determination slit

Claims (12)

表面に放射率の異なる材料を用いて付された個体識別用の記号を有する対象物を赤外線カメラで測定した2次元温度データを取得する2次元温度データ取得ステップと、
前記2次元温度データ取得ステップで取得した2次元温度データを所定の温度閾値で2値化して入力画像を生成する2値化処理ステップと、
前記個体識別用の全ての種類の記号について、前記赤外線カメラで測定して2値化した基準画像を予め用意しておき、当該基準画像それぞれを前記2値化処理ステップで生成した入力画像と照合して、最も適合度合いの高い基準画像の記号を当該入力画像の記号として認識する特徴適合判定ステップとを備える記号識別方法。
A two-dimensional temperature data acquisition step of acquiring two-dimensional temperature data obtained by measuring an object having an individual identification symbol attached to the surface using materials having different emissivities with an infrared camera;
A binarization processing step of binarizing the two-dimensional temperature data acquired in the two-dimensional temperature data acquisition step with a predetermined temperature threshold to generate an input image;
For all the types of symbols for individual identification, reference images measured with the infrared camera and binarized are prepared in advance, and each of the reference images is collated with the input image generated in the binarization processing step. And a feature matching determination step of recognizing the symbol of the reference image having the highest matching level as the symbol of the input image.
前記特徴適合判定ステップでは、前記基準画像のパワースペクトルと前記入力画像のパワースペクトルを求め、当該パワースペクトル間の誤差が小さいほど適合度合いが高いと判定することを特徴とする請求項1記載の記号識別方法。   2. The symbol according to claim 1, wherein in the feature matching determination step, a power spectrum of the reference image and a power spectrum of the input image are obtained, and it is determined that the matching degree is higher as an error between the power spectra is smaller. Identification method. 前記2次元温度データ取得ステップでは、前記対象物を測定した2次元温度データにおいて前記個体識別用の記号が存在すると想定される領域から、位置を変えて複数の2次元温度データを抽出し、
前記2値化処理ステップでは、前記複数の2次元温度データそれぞれを所定の温度閾値で2値化して複数の入力画像を生成し、
前記特徴適合判定ステップでは、前記個体識別用の記号すべての種類の前記基準画像それぞれを前記複数の入力画像と照合して、最も適合度合いの高い基準画像の記号を認識することを特徴とする請求項1または請求項2記載の記号識別方法。
In the two-dimensional temperature data acquisition step, a plurality of two-dimensional temperature data are extracted at different positions from a region where the symbol for individual identification is assumed to exist in the two-dimensional temperature data obtained by measuring the object,
In the binarization processing step, each of the plurality of two-dimensional temperature data is binarized with a predetermined temperature threshold to generate a plurality of input images,
The feature matching determination step is characterized by recognizing the reference image symbol having the highest degree of matching by comparing each of the reference images of all types of the individual identification symbols with the plurality of input images. The symbol identification method according to claim 1 or claim 2.
前記2値化処理ステップでは、前記2次元温度データの平均温度を求め、当該平均温度から値を下げていきその値より低い温度のデータ数が一定数になる値を温度閾値に定めて2値化することを特徴とする請求項1から請求項3のうちのいずれか1項記載の記号識別方法。   In the binarization processing step, an average temperature of the two-dimensional temperature data is obtained, and a value that lowers the value from the average temperature and sets the number of data at a temperature lower than that value to a constant number is defined as a binary value. 4. The symbol identification method according to claim 1, wherein: 前記特徴適合判定ステップでは、前記基準画像と前記入力画像のパワースペクトル間の誤差に基づく判定に加え、前記基準画像と前記入力画像のパターンマッチに基づく判定を組み合わせて、適合度合いを判定することを特徴とする請求項1から請求項4のうちのいずれか1項記載の記号識別方法。   In the feature adaptation determination step, in addition to the determination based on an error between power spectra of the reference image and the input image, a determination based on a pattern match between the reference image and the input image is combined to determine the degree of matching. The symbol identification method according to any one of claims 1 to 4, characterized in that: 前記2次元温度データ取得ステップは、
前記対象物の移動経路に向けて設置された前記赤外線カメラが出力する2次元温度データの、当該移動経路に相当する位置に、2つの判定領域を設定する判定領域設定ステップと、
前記判定領域設定ステップで設定した前記2つの判定領域の両方において、所定の判定温度以上の温度データ群が所定面積以上になるタイミングを判定し、当該タイミングの前記2次元温度データを取得するデータ取得タイミング判定ステップとを備えることを特徴とする請求項1から請求項5のうちのいずれか1項記載の記号識別方法。
The two-dimensional temperature data acquisition step includes
A determination area setting step of setting two determination areas at a position corresponding to the movement path of the two-dimensional temperature data output by the infrared camera installed toward the movement path of the object;
Data acquisition for determining a timing at which a temperature data group equal to or higher than a predetermined determination temperature is equal to or greater than a predetermined area in both of the two determination regions set in the determination region setting step, and acquiring the two-dimensional temperature data at the timing The symbol identification method according to claim 1, further comprising a timing determination step.
前記2次元温度データ取得ステップは、
前記対象物の移動経路に向けて設置された複数の前記赤外線カメラのうちの1台をメインカメラ、残りを連動用カメラとし、当該メインカメラが出力する2次元温度データの前記移動経路に相当する位置に2つの判定領域を設定すると共に、当該連動用カメラが出力する2次元温度データの前記移動経路に相当する位置にも2つの判定領域を設定する判定領域設定ステップと、
前記メインカメラの2次元温度データに対して設定された前記2つの判定領域の少なくとも一方に、所定の判定温度以上の温度データの出現を検出して、前記メインカメラへの前記対象物の接近を判定する接近検出ステップと、
前記接近検出ステップで接近を判定した場合に、前記メインカメラの2次元温度データに対して設定された前記2つの判定領域の両方において前記所定の判定温度以上の温度データ群が所定面積以上になるタイミングを判定して当該タイミングの前記2次元温度データを取得すると共に、前記連動用カメラの2次元温度データに対して設定された前記2つの判定領域の両方において前記所定の判定温度以上の温度データ群が所定面積以上になるタイミングを判定して当該タイミングの前記2次元温度データを取得するデータ取得タイミング判定ステップとを備えることを特徴とする請求項1から請求項5のうちのいずれか1項記載の記号識別方法。
The two-dimensional temperature data acquisition step includes
One of the plurality of infrared cameras installed toward the moving path of the object is a main camera, and the remaining is an interlocking camera, which corresponds to the moving path of the two-dimensional temperature data output by the main camera. A determination area setting step for setting two determination areas at positions, and setting two determination areas at positions corresponding to the movement path of the two-dimensional temperature data output by the interlocking camera;
By detecting the appearance of temperature data equal to or higher than a predetermined determination temperature in at least one of the two determination regions set for the two-dimensional temperature data of the main camera, the approach of the object to the main camera is detected. An approach detection step for determining;
When approach is determined in the approach detection step, a temperature data group equal to or higher than the predetermined determination temperature is equal to or greater than a predetermined area in both of the two determination regions set for the two-dimensional temperature data of the main camera. The timing is determined to acquire the two-dimensional temperature data at the timing, and the temperature data equal to or higher than the predetermined determination temperature in both of the two determination areas set for the two-dimensional temperature data of the interlocking camera. 6. The data acquisition timing determination step of determining a timing at which the group becomes a predetermined area or more and acquiring the two-dimensional temperature data at the timing. 6. The symbol identification method described.
前記2次元温度データ取得ステップは、
前記対象物の移動経路に向けて設置された複数の前記赤外線カメラのうちの1台をメインカメラ、残りを連動用カメラとし、当該メインカメラが出力する2次元温度データの前記移動経路に相当する位置に2つの判定領域を設定する判定領域設定ステップと、
前記メインカメラの2次元温度データに対して設定された前記2つの判定領域の両方において前記所定の判定温度以上の温度データ群が所定面積以上になるタイミングを判定し、当該タイミングの前記2次元温度データを取得するデータ取得タイミング判定ステップとを備えることを特徴とする請求項1から請求項5のうちのいずれか1項記載の記号識別方法。
The two-dimensional temperature data acquisition step includes
One of the plurality of infrared cameras installed toward the moving path of the object is a main camera, and the remaining is an interlocking camera, which corresponds to the moving path of the two-dimensional temperature data output by the main camera. A determination area setting step for setting two determination areas at positions;
In both of the two determination areas set for the two-dimensional temperature data of the main camera, a timing at which a temperature data group equal to or higher than the predetermined determination temperature becomes a predetermined area or more is determined, and the two-dimensional temperature at the timing is determined. The symbol identification method according to any one of claims 1 to 5, further comprising a data acquisition timing determination step of acquiring data.
前記対象物の移動経路と前記対象物以外の異物の移動経路とが一部重なる場合に、前記赤外線カメラが出力する2次元温度データの、前記異物の移動経路に相当する位置に異物判定領域を設定し、当該異物判定領域において所定の異物判定温度以上の温度データ群が所定面積以上になった場合に異物と判定する異物検出ステップを備え、
前記データ取得タイミング判定ステップでは、前記異物検出ステップで異物を検出した場合にデータ取得タイミングの判定処理を中断することを特徴とする請求項6から請求項8のうちのいずれか1項記載の記号識別方法。
When a movement path of the object and a movement path of a foreign object other than the object partially overlap, a foreign object determination area is set at a position corresponding to the movement path of the foreign object in the two-dimensional temperature data output by the infrared camera. A foreign object detection step for determining a foreign object when a temperature data group equal to or higher than a predetermined foreign object determination temperature is equal to or greater than a predetermined area in the foreign object determination region;
The symbol according to any one of claims 6 to 8, wherein, in the data acquisition timing determination step, the data acquisition timing determination process is interrupted when a foreign object is detected in the foreign object detection step. Identification method.
前記判定領域設定ステップで設定した前記2つの判定領域に前記所定の判定温度以上の温度データが出現する順番に基づいて、前記対象物の移動方向を判定する移動方向判定ステップを備える請求項6から請求項9のうちのいずれか1項記載の記号識別方法。   7. A moving direction determination step for determining a moving direction of the object based on the order in which temperature data equal to or higher than the predetermined determination temperature appears in the two determination areas set in the determination area setting step. The symbol identification method according to claim 9. 前記データ取得タイミング判定ステップで判定したタイミングの前記2次元温度データを、前記所定の判定温度以上の温度データ群が中心位置になるようセンタリングするセンタリング補正ステップを備えることを特徴とする請求項6から請求項10のうちのいずれか1項記載の記号識別方法。   7. A centering correction step of centering the two-dimensional temperature data at the timing determined in the data acquisition timing determination step so that a temperature data group equal to or higher than the predetermined determination temperature becomes a center position. The symbol identification method according to claim 10. 表面に放射率の異なる材料を用いて付された個体識別用の記号を有する対象物を赤外線カメラで測定した2次元温度データを取得する2次元温度データ取得部と、
前記2次元温度データ取得部で取得した2次元温度データを所定の温度閾値で2値化して入力画像を生成する2値化処理部と、
前記個体識別用の全ての種類の記号について、前記赤外線カメラで測定して2値化した基準画像を保持している基準画像保持部と、
前記基準画像保持部が保持している基準画像それぞれを前記2値化処理部で生成した入力画像と照合して、最も適合度合いの高い基準画像の記号を当該入力画像の記号として認識する特徴適合判定部とを備える記号識別装置。
A two-dimensional temperature data acquisition unit for acquiring two-dimensional temperature data obtained by measuring an object having an individual identification symbol attached to a surface using materials having different emissivities with an infrared camera;
A binarization processing unit that binarizes the two-dimensional temperature data acquired by the two-dimensional temperature data acquisition unit with a predetermined temperature threshold, and generates an input image;
For all types of symbols for individual identification, a reference image holding unit holding a reference image measured and binarized by the infrared camera,
Feature matching in which each reference image held by the reference image holding unit is compared with the input image generated by the binarization processing unit, and the symbol of the reference image having the highest degree of matching is recognized as the symbol of the input image A symbol identification device comprising a determination unit.
JP2012124334A 2012-05-31 2012-05-31 Symbol identification method and symbol identification device Expired - Fee Related JP5959319B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012124334A JP5959319B2 (en) 2012-05-31 2012-05-31 Symbol identification method and symbol identification device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012124334A JP5959319B2 (en) 2012-05-31 2012-05-31 Symbol identification method and symbol identification device

Publications (2)

Publication Number Publication Date
JP2013249506A true JP2013249506A (en) 2013-12-12
JP5959319B2 JP5959319B2 (en) 2016-08-02

Family

ID=49848494

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012124334A Expired - Fee Related JP5959319B2 (en) 2012-05-31 2012-05-31 Symbol identification method and symbol identification device

Country Status (1)

Country Link
JP (1) JP5959319B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016056398A (en) * 2014-09-08 2016-04-21 Jfeスチール株式会社 Inspection device and inspection method for molten metal housing container
GB2569644A (en) * 2017-12-22 2019-06-26 Land Instruments International Ltd Measurement system for metal strip production line
CN114993480A (en) * 2022-05-27 2022-09-02 东方电气集团东方电机有限公司 Infrared temperature detection method and device, terminal equipment and storage medium

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9950377B2 (en) * 2014-05-30 2018-04-24 National Taiwan Normal University Plural resistance-capacitance (PRC) electrical discharge machining system

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5824972A (en) * 1981-08-06 1983-02-15 Toshiba Corp Optical character reader
JPH0644375A (en) * 1992-07-23 1994-02-18 Sumitomo Metal Ind Ltd Foreign material judging method
JPH06303485A (en) * 1993-04-16 1994-10-28 Mitsubishi Electric Corp Infra-red image pickup device
JPH07230548A (en) * 1994-02-18 1995-08-29 Mitsubishi Heavy Ind Ltd Automatic pattern matching processor and its method
JPH07300004A (en) * 1994-05-02 1995-11-14 Bridgestone Corp Rubber tire, manufacture thereof and discriminating method for rubber tire
JP2000205823A (en) * 1999-01-11 2000-07-28 Tokyo Electron Ltd Method for identifying object and method and device for positioning the same
JP2003256853A (en) * 2002-03-01 2003-09-12 Glory Ltd Image matching method, image matching device and image matching program
JP2004043212A (en) * 2002-07-09 2004-02-12 Asahi Glass Co Ltd Glass plate with id-identifying function and process for identifying vehicle
US20040031583A1 (en) * 2000-11-04 2004-02-19 Fritz-Peter Pleschiutschnigg Method and device for controlling the temperature of steel from the surface of the bath of a continuous casting installation up to the furnace tap

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5824972A (en) * 1981-08-06 1983-02-15 Toshiba Corp Optical character reader
JPH0644375A (en) * 1992-07-23 1994-02-18 Sumitomo Metal Ind Ltd Foreign material judging method
JPH06303485A (en) * 1993-04-16 1994-10-28 Mitsubishi Electric Corp Infra-red image pickup device
JPH07230548A (en) * 1994-02-18 1995-08-29 Mitsubishi Heavy Ind Ltd Automatic pattern matching processor and its method
JPH07300004A (en) * 1994-05-02 1995-11-14 Bridgestone Corp Rubber tire, manufacture thereof and discriminating method for rubber tire
JP2000205823A (en) * 1999-01-11 2000-07-28 Tokyo Electron Ltd Method for identifying object and method and device for positioning the same
US20040031583A1 (en) * 2000-11-04 2004-02-19 Fritz-Peter Pleschiutschnigg Method and device for controlling the temperature of steel from the surface of the bath of a continuous casting installation up to the furnace tap
JP2003256853A (en) * 2002-03-01 2003-09-12 Glory Ltd Image matching method, image matching device and image matching program
JP2004043212A (en) * 2002-07-09 2004-02-12 Asahi Glass Co Ltd Glass plate with id-identifying function and process for identifying vehicle

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016056398A (en) * 2014-09-08 2016-04-21 Jfeスチール株式会社 Inspection device and inspection method for molten metal housing container
GB2569644A (en) * 2017-12-22 2019-06-26 Land Instruments International Ltd Measurement system for metal strip production line
GB2569644B (en) * 2017-12-22 2020-08-19 Land Instruments International Ltd Measurement system for metal strip production line
CN114993480A (en) * 2022-05-27 2022-09-02 东方电气集团东方电机有限公司 Infrared temperature detection method and device, terminal equipment and storage medium
WO2023226527A1 (en) * 2022-05-27 2023-11-30 东方电气集团东方电机有限公司 Infrared temperature measurement method and apparatus, terminal device, and storage medium

Also Published As

Publication number Publication date
JP5959319B2 (en) 2016-08-02

Similar Documents

Publication Publication Date Title
JP5959319B2 (en) Symbol identification method and symbol identification device
KR20110115927A (en) Method for extracting of license number plate and apparatus using the same
JP6226368B2 (en) Vehicle monitoring apparatus and vehicle monitoring method
US20140119609A1 (en) Image recognizing apparatus and method
US8718370B2 (en) Optical information-reading apparatus and optical information-reading method
WO2021000948A1 (en) Counterweight weight detection method and system, and acquisition method and system, and crane
JP6197340B2 (en) Image processing apparatus, image processing method, and program
JP2010019667A (en) Image measuring apparatus and computer program
JP2011058939A (en) Apparatus and method for visual inspection
JP5760220B2 (en) Distance image camera and method for recognizing surface shape of object using the same
JP5971108B2 (en) Image processing apparatus, image processing method, and image processing program
CN102054174A (en) Method and system for positioning licence plate
JP2014085115A (en) Dimension measurement device, dimension measurement method, and program for dimension measurement device
KR101328266B1 (en) Apparatus for detecting surface crack of hot slab
KR20110078566A (en) Position detection using digital image recognition system for efficient loading
JP6357046B2 (en) Work item identification device
JP2018109824A (en) Electronic control device, electronic control system, and electronic control method
JP2007212238A (en) Water level detector and water level detection method using it
JP2017058950A (en) Recognition device, image pickup system, and image pickup device, and recognition method and program for recognition
CN112989998B (en) Material monitoring method, material monitoring device and stirring station
CN102724397B (en) Name card automatic detection method and device thereof
JP2009193130A (en) Vehicle surrounding monitoring device, vehicle, program for vehicle surrounding monitoring and vehicle surrounding monitoring method
JP3675543B2 (en) Image position measurement method
JP2010015235A (en) Pedestrian detector and program
KR20090114565A (en) Wafer location error indicating system and method using vision sensor

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150325

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160315

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160426

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160524

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160621

R150 Certificate of patent or registration of utility model

Ref document number: 5959319

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees