JP5466606B2 - Spray painting simulation system - Google Patents

Spray painting simulation system Download PDF

Info

Publication number
JP5466606B2
JP5466606B2 JP2010207881A JP2010207881A JP5466606B2 JP 5466606 B2 JP5466606 B2 JP 5466606B2 JP 2010207881 A JP2010207881 A JP 2010207881A JP 2010207881 A JP2010207881 A JP 2010207881A JP 5466606 B2 JP5466606 B2 JP 5466606B2
Authority
JP
Japan
Prior art keywords
coating
pseudo
dimensional image
paint
dimensional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010207881A
Other languages
Japanese (ja)
Other versions
JP2012063990A (en
Inventor
修 熊本
泰三 村田
多実男 升岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Asahi Electronics Co Ltd
Original Assignee
Asahi Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Asahi Electronics Co Ltd filed Critical Asahi Electronics Co Ltd
Priority to JP2010207881A priority Critical patent/JP5466606B2/en
Priority to PCT/JP2011/005249 priority patent/WO2012035782A1/en
Publication of JP2012063990A publication Critical patent/JP2012063990A/en
Application granted granted Critical
Publication of JP5466606B2 publication Critical patent/JP5466606B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/20Design optimisation, verification or simulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20Indexing scheme for editing of 3D models
    • G06T2219/2012Colour editing, changing, or manipulating; Use of colour codes

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Geometry (AREA)
  • Architecture (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Spray Control Apparatus (AREA)
  • Processing Or Creating Images (AREA)

Description

本発明は、3次元の被塗物に対するスプレー塗装をシミュレートするスプレー塗装シミュレートシステムに関する。   The present invention relates to a spray coating simulation system that simulates spray coating on a three-dimensional workpiece.

従来、3次元の被塗物に対するスプレー塗装をシミュレートするスプレー塗装シミュレートシステムとして、塗料ノズルと被塗物との関係を光源と被照射体との関係に置き換えたのち光照射シミュレーションを行うものがある。   Conventionally, as a spray coating simulation system that simulates spray coating on a three-dimensional object, a light irradiation simulation is performed after the relationship between the paint nozzle and the object is replaced with the relationship between the light source and the irradiated object. There is.

この従来のスプレー塗装シミュレートシステムは、被塗物の3次元形状と、塗料ノズルの特性を数学的に近似した光源モデルと、塗装条件とともに観測画像条件を3次元グラフィックス装置の入力形式に合致するよう書式変換装置を用いて変更したのち3次元グラフィックス装置に入力することにより、塗装処理を行った被塗物の塗着状態を3次元画像として出力するようになっている(例えば、特許文献1参照)。   This conventional spray coating simulation system matches the three-dimensional shape of the object to be coated, the light source model that mathematically approximates the characteristics of the paint nozzle, and the observation image conditions together with the coating conditions to the input format of the three-dimensional graphics device. By changing the format using the format conversion device and then inputting it to the three-dimensional graphics device, the application state of the object to be coated is output as a three-dimensional image (for example, a patent) Reference 1).

特開平5−324798号公報JP-A-5-324798

しかしながら、上述したような従来の技術では、塗料ノズルと被塗物との関係を光源と被照射体との関係に置き換えることによりスプレー塗装をシミュレートするため、塗料の噴射圧や広がりがそれぞれ異なる多様な塗料ノズルに対応したスプレー塗装をシミュレートすることができないといった課題があった。   However, in the conventional technology as described above, spray coating is simulated by replacing the relationship between the paint nozzle and the object to be coated with the relationship between the light source and the object to be irradiated. There was a problem that spray coating corresponding to various paint nozzles could not be simulated.

本発明は、このような従来の課題を解決するためになされたもので、塗料の噴射圧や広がりがそれぞれ異なる多様な塗料ノズルに対応したスプレー塗装をシミュレートすることができるスプレー塗装シミュレートシステムを提供することを目的とする。   The present invention has been made to solve such a conventional problem, and is a spray coating simulation system capable of simulating spray coating corresponding to various paint nozzles having different spray pressures and spreads of the paint. The purpose is to provide.

本発明のスプレー塗装シミュレートシステムは、3次元の被塗物に対するスプレー塗装をシミュレートするスプレー塗装シミュレートシステムにおいて、3次元画像を表示するための3次元表示装置と、前記3次元画像が表す被塗物を3次元に視認するために利用者に装着される3次元視認装置と、前記3次元視認装置の位置および姿勢から見た前記被塗物を表す3次元画像を表示させるように前記3次元表示装置を制御する表示制御装置と、前記被塗物を擬似的に塗装するための擬似塗装装置と、を備え、前記表示制御装置は、前記擬似塗装装置が擬似する塗装装置の塗布口に装着される塗料ノズルに対して、前記擬似塗装装置から予め定められた基準位置にある平面に垂直に塗料を塗布したときの塗料の分布を表す塗布パターンを格納するパターン情報格納部と、前記塗料ノズルが選択されるノズル選択部と、前記3次元視認装置の位置および姿勢から見た前記被塗物を表す3次元画像を生成する3次元画像生成部と、を有し、前記3次元画像生成部は、前記擬似塗装装置によって擬似的な塗装が行われている間、前記擬似的な塗装が行われている時間と、前記ノズル選択部によって選択された塗料ノズルに対応して前記パターン情報格納部に格納されている塗布パターンと、前記擬似塗装装置の位置および姿勢とに基づいて、塗装された前記被塗物を表すよう前記3次元画像を生成する構成を有している。   The spray coating simulation system of the present invention is a spray coating simulation system for simulating spray coating on a three-dimensional object, a three-dimensional display device for displaying a three-dimensional image, and the three-dimensional image The three-dimensional visual recognition device worn by the user for visually confirming the object to be coated, and the three-dimensional image representing the object to be coated viewed from the position and orientation of the three-dimensional visual recognition device are displayed. A display control device for controlling a three-dimensional display device; and a pseudo coating device for pseudo-coating the object to be coated, wherein the display control device is an application port of a coating device simulated by the pseudo coating device. An application pattern representing the distribution of the paint when the paint is applied perpendicularly to a plane at a predetermined reference position from the pseudo-coating device is stored for the paint nozzle attached to A pattern information storage unit, a nozzle selection unit for selecting the paint nozzle, and a three-dimensional image generation unit for generating a three-dimensional image representing the object to be coated viewed from the position and orientation of the three-dimensional visual recognition device, The three-dimensional image generation unit includes a paint nozzle selected by the nozzle selection unit and a time during which the pseudo coating is performed while the pseudo coating is being performed by the pseudo coating apparatus. Corresponding to the application pattern stored in the pattern information storage unit and the position and orientation of the pseudo-coating device to generate the three-dimensional image to represent the object to be coated Have.

この構成により、本発明のスプレー塗装シミュレートシステムは、塗料ノズルと塗布パターンとを対応させて格納しておき、選択された塗料ノズルに対応した塗布パターンに基づいて、スプレー塗装をシミュレートするため、塗料の噴射圧や広がりがそれぞれ異なる多様な塗料ノズルに対応したスプレー塗装をシミュレートすることができる。   With this configuration, the spray coating simulation system of the present invention stores the paint nozzle and the application pattern in correspondence with each other, and simulates the spray coating based on the application pattern corresponding to the selected paint nozzle. It is possible to simulate spray coating corresponding to various paint nozzles having different spray pressures and spreads.

なお、前記塗布パターンは、前記擬似塗装装置の水平方向の塗料の厚みの分布と、前記擬似塗装装置の垂直方向の塗料の厚みの分布とによって構成されていてもよい。   The application pattern may be constituted by a distribution of paint thickness in the horizontal direction of the pseudo coating apparatus and a distribution of thickness of paint in the vertical direction of the pseudo coating apparatus.

この構成により、本発明のスプレー塗装シミュレートシステムは、擬似塗装装置の水平方向の塗料の厚みの分布と、擬似塗装装置の垂直方向の塗料の厚みの分布とを調整することにより、塗料の噴射圧や広がりがそれぞれ異なる多様な塗料ノズルの塗布パターンを設定することができる。   With this configuration, the spray coating simulation system of the present invention adjusts the distribution of the paint thickness in the horizontal direction of the pseudo-coating apparatus and the distribution of the thickness of the paint in the vertical direction of the pseudo-coating apparatus. Various paint nozzle application patterns with different pressures and spreads can be set.

また、前記3次元画像生成部は、累積した塗料の厚みの分布に応じた濃さで前記3次元画像が表す被塗物を着色するようにしてもよい。   The three-dimensional image generation unit may color the object to be coated represented by the three-dimensional image with a density corresponding to the accumulated thickness distribution of the paint.

この構成により、本発明のスプレー塗装シミュレートシステムは、3次元画像が表す被塗物に着色された色の濃淡で、被塗物に塗布された塗料の厚みを表現することができる。   With this configuration, the spray coating simulation system of the present invention can express the thickness of the paint applied to the object to be painted with the shade of the color colored on the object represented by the three-dimensional image.

また、前記3次元画像生成部は、累積した塗料の厚みの分布に応じた配色で前記3次元画像が表す被塗物を着色するようにしてもよい。   Further, the three-dimensional image generation unit may color the object to be coated represented by the three-dimensional image with a color scheme corresponding to the accumulated distribution of paint thicknesses.

この構成により、本発明のスプレー塗装シミュレートシステムは、3次元画像が表す被塗物に着色された色で、被塗物に塗布された塗料の厚みを表現することができる。   With this configuration, the spray coating simulation system of the present invention can express the thickness of the paint applied to the object to be coated with the color colored on the object to be represented which the three-dimensional image represents.

また、前記3次元画像生成部は、前記被塗物を展開した展開図と、適切に塗装された前記被塗物の基準展開図とを表す画像を生成するようにしてもよい。   Further, the three-dimensional image generation unit may generate an image representing a developed view of the object to be developed and a reference development view of the object to be coated appropriately.

この構成により、本発明のスプレー塗装シミュレートシステムは、被塗物に対する塗装を視覚的に評価させることができる。   With this configuration, the spray coating simulation system of the present invention can visually evaluate the coating on the object to be coated.

本発明は、塗料の噴射圧や広がりがそれぞれ異なる多様な塗料ノズルに対応したスプレー塗装をシミュレートすることができるスプレー塗装シミュレートシステムを提供することができる。   The present invention can provide a spray coating simulation system capable of simulating spray coating corresponding to various paint nozzles having different spray pressures and spreads of paint.

本発明の一実施の形態に係るスプレー塗装シミュレートシステムの構成を示すブロック図である。It is a block diagram which shows the structure of the spray coating simulation system which concerns on one embodiment of this invention. 本発明の一実施の形態に係るスプレー塗装シミュレートシステムを構成する表示制御装置のハードウェア構成図である。It is a hardware block diagram of the display control apparatus which comprises the spray coating simulation system which concerns on one embodiment of this invention. 本発明の一実施の形態に係るスプレー塗装シミュレートシステムを構成する表示制御装置の機能ブロック図である。It is a functional block diagram of the display control apparatus which comprises the spray coating simulation system which concerns on one embodiment of this invention. 本発明の一実施の形態に係るスプレー塗装シミュレートシステムを構成する表示制御装置によって参照される塗料ノズルと、塗布パターンとの対応関係を示す概念図である。It is a conceptual diagram which shows the correspondence of the coating material nozzle referred by the display control apparatus which comprises the spray coating simulation system which concerns on one embodiment of this invention, and an application pattern. 本発明の一実施の形態に係るスプレー塗装シミュレートシステムを構成する表示制御装置によって参照される塗布パターンを示す概念図である。It is a conceptual diagram which shows the coating pattern referred by the display control apparatus which comprises the spray coating simulation system which concerns on one embodiment of this invention. 本発明の一実施の形態に係るスプレー塗装シミュレートシステムを構成する表示制御装置によって生成される3次元画像が表す被塗物を示す概念図である。It is a conceptual diagram which shows the to-be-coated object which the three-dimensional image produced | generated by the display control apparatus which comprises the spray coating simulation system which concerns on one embodiment of this invention represents. 本発明の一実施の形態に係るスプレー塗装シミュレートシステムを構成する表示制御装置によって生成された3次元画像が表す被塗物に対する塗装を説明するための概念図である。It is a conceptual diagram for demonstrating the coating with respect to the to-be-coated object which the three-dimensional image produced | generated by the display control apparatus which comprises the spray coating simulation system which concerns on one embodiment of this invention. 本発明の一実施の形態に係るスプレー塗装シミュレートシステムを構成する表示制御装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the display control apparatus which comprises the spray coating simulation system which concerns on one embodiment of this invention. 本発明の一実施の形態に係るスプレー塗装シミュレートシステムを構成する表示制御装置によって生成される他の画像を示す概念図である。It is a conceptual diagram which shows the other image produced | generated by the display control apparatus which comprises the spray coating simulation system which concerns on one embodiment of this invention.

以下に、本発明の実施の形態おけるスプレー塗装シミュレートシステムについて、図面を参照しながら説明する。   Hereinafter, a spray coating simulation system according to an embodiment of the present invention will be described with reference to the drawings.

図1に示すように、本発明の一実施の形態に係るスプレー塗装シミュレートシステム1は、3次元画像を表示するための3次元表示装置10と、3次元画像が表す被塗物を3次元に視認するために利用者に装着される3次元視認装置11と、3次元視認装置11の位置および姿勢から見た被塗物を表す3次元画像を表示させるように3次元表示装置10を制御する表示制御装置12と、被塗物を擬似的に塗装するための擬似塗装装置13とを備えている。   As shown in FIG. 1, a spray coating simulation system 1 according to an embodiment of the present invention includes a three-dimensional display device 10 for displaying a three-dimensional image and a three-dimensional object to be represented by the three-dimensional image. The 3D display device 10 is controlled so as to display a 3D image display device 11 that is worn by the user for visual recognition and a 3D image representing the object viewed from the position and orientation of the 3D image recognition device 11. A display control device 12 for performing the above-mentioned and a pseudo-coating device 13 for pseudo-coating the article to be coated.

3次元表示装置10は、左目用および右目用の映像をそれぞれ照射するためのプロジェクタ10a、10bと、透過性スクリーン10cとによって構成されている。プロジェクタ10a、10bのレンズには、互いに異なる周りに円偏光させるための円偏光フィルタがそれぞれ装着されている。ここで、プロジェクタ10a、10bおよび透過性スクリーン10cの位置および姿勢は、スプレー塗装シミュレートシステム1において既知とする。   The three-dimensional display device 10 includes projectors 10a and 10b for illuminating left-eye and right-eye images, respectively, and a transmissive screen 10c. The lenses of the projectors 10a and 10b are each equipped with a circularly polarizing filter for circularly polarizing around different points. Here, the positions and orientations of the projectors 10 a and 10 b and the transmissive screen 10 c are assumed to be known in the spray coating simulation system 1.

3次元視認装置11は、3次元表示装置10によって円偏光された左目用の映像と右目用の映像とを左右の目でそれぞれ見られるように円偏光フィルタが設けられた偏光メガネによって構成されている。   The three-dimensional visual recognition device 11 is composed of polarized glasses provided with circular polarization filters so that the left-eye image and the right-eye image circularly polarized by the three-dimensional display device 10 can be seen by the left and right eyes, respectively. Yes.

3次元視認装置11には、その位置および姿勢を検知するセンサ20が設けられている。センサ20は、超音波センサおよびジャイロを有している。このため、本実施の形態において、スプレー塗装シミュレートシステム1は、超音波を発する3つの超音波発生源をそれぞれ有する3つの超音波発生器21a乃至21cを備えている。   The three-dimensional visual recognition device 11 is provided with a sensor 20 that detects its position and posture. The sensor 20 includes an ultrasonic sensor and a gyro. Therefore, in the present embodiment, the spray coating simulation system 1 includes three ultrasonic generators 21a to 21c each having three ultrasonic generation sources that emit ultrasonic waves.

なお、超音波発生器21a乃至21cは、透過性スクリーン10cの左端、右端および上端にそれぞれ設けられているものとするが、これらの設置位置は、スプレー塗装シミュレートシステム1において既知であれば、任意である。   The ultrasonic generators 21a to 21c are provided at the left end, the right end, and the upper end of the transmissive screen 10c, respectively. However, if these installation positions are known in the spray coating simulation system 1, Is optional.

また、図1において、3つの超音波発生器21a乃至21cが示されているが、スプレー塗装シミュレートシステム1は、更に多くの超音波発生器を備えるようにしてもよい。また、各超音波発生器21a乃至21cは、少なくとも1つの超音波発生源を有していればよい。   Further, in FIG. 1, three ultrasonic generators 21a to 21c are shown. However, the spray coating simulation system 1 may include more ultrasonic generators. Moreover, each ultrasonic generator 21a thru | or 21c should just have at least 1 ultrasonic generation source.

スプレー塗装シミュレートシステム1は、これら超音波発生器21a乃至21cを制御することによってセンサ20の位置を算出するとともにセンサ20の姿勢を取得し、これらセンサ20の位置および姿勢を表示制御装置12に伝達するトラッキングコントローラ22を備えている。すなわち、トラッキングコントローラ22は、3次元視認装置11の位置および姿勢を表示制御装置12に伝達するようになっている。   The spray coating simulation system 1 calculates the position of the sensor 20 by controlling the ultrasonic generators 21a to 21c, acquires the posture of the sensor 20, and sends the position and posture of the sensor 20 to the display control device 12. A tracking controller 22 for transmission is provided. That is, the tracking controller 22 transmits the position and orientation of the three-dimensional viewing device 11 to the display control device 12.

表示制御装置12は、例えば、図2に示すように、CPU(Central Processing Unit)30と、RAM(Random Access Memory)31と、ROM(Read Only Memory)32と、ハードディスク装置33と、キーボード装置やポインティングデバイス等よりなる入力装置34と、表示装置35と、3次元表示装置10やトラッキングコントローラ22等の外部装置および各種センサと通信するための入出力ポート36とを備えた一般的なコンピュータ装置によって構成されている。   For example, as shown in FIG. 2, the display control device 12 includes a CPU (Central Processing Unit) 30, a RAM (Random Access Memory) 31, a ROM (Read Only Memory) 32, a hard disk device 33, a keyboard device, By a general computer device including an input device 34 including a pointing device, a display device 35, an external device such as the three-dimensional display device 10 and the tracking controller 22, and an input / output port 36 for communicating with various sensors. It is configured.

ROM32やハードディスク装置33には、当該コンピュータ装置を表示制御装置12として機能させるためのプログラムが記憶されている。すなわち、CPU30がRAM31を作業領域としてROM32やハードディスク装置33に記憶されたプログラムを実行することにより、当該コンピュータ装置は、表示制御装置12として機能する。   The ROM 32 and the hard disk device 33 store a program for causing the computer device to function as the display control device 12. That is, when the CPU 30 executes a program stored in the ROM 32 or the hard disk device 33 using the RAM 31 as a work area, the computer device functions as the display control device 12.

図1において、擬似塗装装置13は、例えば、実際にスプレー塗装に用いられる塗装スプレーによって構成されている。この塗装スプレーは、実際に塗料を噴射しないように、塗料が補充されることなく使用される。   In FIG. 1, the pseudo coating apparatus 13 is configured by, for example, a coating spray that is actually used for spray coating. This paint spray is used without being refilled so as not to actually spray the paint.

擬似塗装装置13には、その位置および姿勢を検知するセンサ23が設けられている。センサ23は、超音波センサおよびジャイロを有している。トラッキングコントローラ22は、超音波発生器21a乃至21cを制御することによってセンサ23の位置を算出するとともにセンサ23の姿勢を取得し、これらセンサ23の位置および姿勢を表示制御装置12に伝達するようになっている。すなわち、トラッキングコントローラ22は、擬似塗装装置13の位置および姿勢を表示制御装置12に伝達するようになっている。   The pseudo coating apparatus 13 is provided with a sensor 23 that detects its position and posture. The sensor 23 has an ultrasonic sensor and a gyro. The tracking controller 22 calculates the position of the sensor 23 by controlling the ultrasonic generators 21a to 21c, acquires the attitude of the sensor 23, and transmits the position and attitude of the sensor 23 to the display control device 12. It has become. That is, the tracking controller 22 is configured to transmit the position and posture of the pseudo coating device 13 to the display control device 12.

また、擬似塗装装置13には、擬似的な塗装の開始および終了を検知するセンサ24が設けられている。センサ24は、擬似的な塗装の開始および終了を表す信号を表示制御装置12に出力するようになっている。   In addition, the pseudo coating apparatus 13 is provided with a sensor 24 that detects the start and end of pseudo coating. The sensor 24 outputs a signal indicating the start and end of pseudo painting to the display control device 12.

図3に示すように、表示制御装置12は、擬似塗装装置13が擬似する塗装装置の塗布口に装着される塗料ノズルに対して、擬似塗装装置13から予め定められた基準位置にある平面に垂直に塗料を塗布したときの塗料の厚みの分布を表す塗布パターンを格納するパターン情報格納部40と、塗料ノズルが選択されるノズル選択部41と、被塗物を3次元表示するための被塗物情報を格納する被塗物情報格納部42と、被塗物を表す3次元画像を生成する3次元画像生成部43とを有している。   As shown in FIG. 3, the display control device 12 is placed on a plane at a reference position determined in advance from the pseudo coating device 13 with respect to the coating nozzle attached to the coating port of the coating device simulated by the pseudo coating device 13. A pattern information storage unit 40 for storing an application pattern representing the distribution of paint thickness when the paint is applied vertically, a nozzle selection unit 41 for selecting a paint nozzle, and a target for displaying a three-dimensional object to be coated. It has the to-be-coated material information storage part 42 which stores coating material information, and the three-dimensional image generation part 43 which produces | generates the three-dimensional image showing to-be-coated material.

パターン情報格納部40は、ハードディスク装置33によって構成され、擬似塗装装置13が擬似する塗装装置の塗布口に装着される塗料ノズルと、擬似塗装装置13から予め定められた基準位置にある平面に垂直に塗料を塗布したときの塗料の厚みの分布を表す塗布パターンとを対応させて格納するようになっている。   The pattern information storage unit 40 is configured by the hard disk device 33, and is perpendicular to a paint nozzle that is attached to the coating port of the coating device simulated by the pseudo coating device 13, and a plane that is at a predetermined reference position from the pseudo coating device 13. The coating pattern representing the distribution of the coating thickness when the coating is applied is stored in correspondence with the coating pattern.

例えば、図4に示すように、パターン情報格納部40には、塗料ノズルの製品番号と、塗布パターンとが対応して格納されている。本実施の形態において、塗布パターンは、図5に示すように、擬似塗装装置13の水平方向の塗料の厚みの分布50と、擬似塗装装置13の垂直方向の塗料の厚みの分布51とによって構成されている。   For example, as shown in FIG. 4, in the pattern information storage unit 40, the product number of the paint nozzle and the application pattern are stored correspondingly. In the present embodiment, as shown in FIG. 5, the coating pattern is configured by a horizontal paint thickness distribution 50 of the pseudo coating apparatus 13 and a vertical paint thickness distribution 51 of the pseudo coating apparatus 13. Has been.

図3において、ノズル選択部41は、CPU30、入力装置34および表示装置35によって構成され、パターン情報格納部40に格納された塗料ノズルの製品番号の一覧を表示装置35に表示し、表示装置35に表示した塗料ノズルの製品番号の一覧から入力装置34を介して1つの塗料ノズルの製品番号を選択させるようになっている。   In FIG. 3, the nozzle selection unit 41 includes a CPU 30, an input device 34, and a display device 35. The nozzle selection unit 41 displays a list of product numbers of paint nozzles stored in the pattern information storage unit 40 on the display device 35. The product number of one paint nozzle is selected via the input device 34 from the list of product numbers of paint nozzles displayed in FIG.

なお、ノズル選択部41をCPU30、擬似塗装装置13および3次元表示装置10によって構成してもよい。すなわち、ノズル選択部41は、パターン情報格納部40に格納された塗料ノズルの製品番号の一覧を3次元表示装置10に表示させ、3次元表示装置10に表示された塗料ノズルの製品番号の一覧から擬似塗装装置13を用いて1つの塗料ノズルの製品番号を選択させるようにしてもよい。   The nozzle selection unit 41 may be configured by the CPU 30, the pseudo coating device 13, and the three-dimensional display device 10. In other words, the nozzle selection unit 41 displays a list of product numbers of paint nozzles stored in the pattern information storage unit 40 on the 3D display device 10 and a list of product numbers of paint nozzles displayed on the 3D display device 10. From the above, the product number of one paint nozzle may be selected using the pseudo coating device 13.

被塗物情報格納部42は、ハードディスク装置33によって構成され、被塗物情報格納部42には、少なくとも1つの被塗物を3次元表示するための被塗物情報が格納されている。本実施の形態において、被塗物情報は、被塗物を再現するための3次元座標の集合を含んでいる。   The article information storage unit 42 includes a hard disk device 33, and the article information storage unit 42 stores article information for three-dimensionally displaying at least one article to be coated. In the present embodiment, the object information includes a set of three-dimensional coordinates for reproducing the object.

なお、表示制御装置12は、被塗物情報格納部42に格納された被塗物情報を表す画像の一覧を表示装置35に表示させ、表示装置35に表示させた画像の一覧から入力装置34を介して1つの被塗物情報に対応する画像を選択させるようにしてもよい。   The display control device 12 causes the display device 35 to display a list of images representing the object information stored in the object information storage unit 42, and the input device 34 from the image list displayed on the display device 35. You may make it select the image corresponding to one to-be-coated object information via.

また、表示制御装置12は、被塗物情報格納部42に格納された被塗物情報を表す画像の一覧を3次元表示装置10に表示させ、3次元表示装置10に表示させた画像の一覧から擬似塗装装置13を用いて1つの被塗物情報に対応する画像を選択させるようにしてもよい。   Further, the display control device 12 displays a list of images representing the object information stored in the object information storage unit 42 on the three-dimensional display device 10 and displays a list of images displayed on the three-dimensional display device 10. Alternatively, an image corresponding to one piece of object information may be selected using the pseudo coating apparatus 13.

3次元画像生成部43は、CPU30によって構成され、センサ20によって検出された3次元視認装置11の位置および姿勢と、被塗物情報格納部42に格納された被塗物情報とに基づいて、図6に示すような被塗物を3次元視認装置11の位置および姿勢から見た3次元画像を生成するようになっている。   The three-dimensional image generation unit 43 is configured by the CPU 30 and is based on the position and orientation of the three-dimensional visual recognition device 11 detected by the sensor 20 and the object information stored in the object information storage unit 42. A three-dimensional image in which the object to be coated as shown in FIG. 6 is viewed from the position and orientation of the three-dimensional visual recognition device 11 is generated.

ここで、3次元画像は、左目用の画像と右目用の画像とによって構成され、3次元画像生成部43は、各画像をプロジェクタ10a、10bに入出力ポート36を介してそれぞれ出力するようになっている。   Here, the three-dimensional image is composed of an image for the left eye and an image for the right eye, and the three-dimensional image generation unit 43 outputs each image to the projectors 10a and 10b via the input / output port 36, respectively. It has become.

また、3次元画像生成部43は、擬似塗装装置13によって擬似的な塗装が行われていることがセンサ24よって検知されている間、擬似的な塗装が行われている時間と、ノズル選択部41によって選択された塗料ノズルに対応してパターン情報格納部40に格納されている塗布パターンと、センサ23によって検知された擬似塗装装置13の位置および姿勢とに基づいて、被塗物60を擬似的に塗装するようになっている。   In addition, the three-dimensional image generation unit 43 includes a time during which the pseudo painting is performed while the sensor 24 detects that the pseudo painting is being performed by the pseudo coating apparatus 13, and a nozzle selection unit. Based on the application pattern stored in the pattern information storage unit 40 corresponding to the paint nozzle selected by 41 and the position and orientation of the pseudo coating apparatus 13 detected by the sensor 23, the object 60 is simulated. It is designed to be painted.

具体的には、3次元画像生成部43は、図7に示すように、センサ23によって検知された擬似塗装装置13の位置および姿勢から、基準位置にある塗布パターンを被塗物60に射影する形で被塗物60を擬似的に塗装するようになっている。   Specifically, as illustrated in FIG. 7, the three-dimensional image generation unit 43 projects the application pattern at the reference position onto the object 60 from the position and orientation of the pseudo coating apparatus 13 detected by the sensor 23. The object 60 is applied in a pseudo manner.

例えば、3次元画像生成部43は、センサ23によって検知された擬似塗装装置13の位置と基準位置との間の距離Dと、センサ23によって検知された擬似塗装装置13の位置と塗布パターンが射影される被塗物60の各画素の位置との間の距離dとに基づいて、当該塗布パターンのサイズをd/D倍拡大し、拡大した塗布パターンの画素のうち、該当画素に塗布された塗料の厚みを算出し、算出した塗料の厚みを画素毎に累積していくことにより、被塗物60を擬似的に塗装するようになっている。   For example, the three-dimensional image generation unit 43 projects the distance D between the position of the pseudo coating apparatus 13 detected by the sensor 23 and the reference position, and the position of the pseudo coating apparatus 13 detected by the sensor 23 and the application pattern. Based on the distance d between each pixel position of the object 60 to be coated, the size of the coating pattern is enlarged by d / D times, and applied to the corresponding pixel among the pixels of the enlarged coating pattern. By calculating the thickness of the paint and accumulating the calculated thickness of the paint for each pixel, the object to be coated 60 is applied in a pseudo manner.

なお、3次元画像生成部43は、累積した塗料の厚みの分布に応じた濃さで被塗物60を着色するようにしてもよく、累積した塗料の厚みの分布に応じた配色で被塗物60を着色するようにしてもよい。   The three-dimensional image generation unit 43 may color the object 60 with a density corresponding to the accumulated distribution of paint thickness, or may be applied with a color scheme according to the accumulated distribution of paint thickness. The object 60 may be colored.

ここで、3次元画像生成部43が塗料の厚みの分布に応じた配色で被塗物60を着色する場合には、3次元画像生成部43は、塗料の厚みを段階的に分類し、分類した段階毎に例えば、白色、黄色、緑色、青色といったように配色する。   Here, when the three-dimensional image generation unit 43 colors the object 60 with a color scheme according to the distribution of the paint thickness, the three-dimensional image generation unit 43 classifies the paint thickness step by step. For example, white, yellow, green, and blue are used for each stage.

このように、3次元画像生成部43は、塗装された被塗物60を3次元視認装置11から見た3次元画像を生成するようになっている。   As described above, the three-dimensional image generation unit 43 generates a three-dimensional image when the painted object 60 is viewed from the three-dimensional visual recognition device 11.

以上のように構成された表示制御装置12の動作を図8に示すフローチャートを参照しながら説明する。   The operation of the display control device 12 configured as described above will be described with reference to the flowchart shown in FIG.

まず、擬似塗装装置13によって擬似的な塗装が行われているか否かが3次元画像生成部43によって判断される(ステップS1)。   First, the three-dimensional image generation unit 43 determines whether or not the pseudo painting is performed by the pseudo painting device 13 (step S1).

ここで、擬似的な塗装が行われていると判断された場合には、3次元画像生成部43によって、ノズル選択部41で選択された塗料ノズルに対応する塗布パターンと、擬似塗装装置13の位置および姿勢とに基づいて、3次元画像が表す被塗物が擬似的に塗装される(ステップS2)。   Here, when it is determined that the pseudo painting is performed, the application pattern corresponding to the paint nozzle selected by the nozzle selection unit 41 by the three-dimensional image generation unit 43 and the pseudo coating device 13 Based on the position and orientation, the object to be coated represented by the three-dimensional image is artificially painted (step S2).

一方、擬似的な塗装が行われていないと判断された場合、または、ステップS2における処理が完了した場合には、3次元視認装置11の位置および姿勢に基づいて、被塗物を3次元視認装置11から見た3次元画像が3次元画像生成部43によって生成され(ステップS3)、生成された3次元画像が3次元表示装置10に出力される(ステップS4)。   On the other hand, when it is determined that the pseudo painting is not performed, or when the process in step S2 is completed, the object to be coated is three-dimensionally visible based on the position and orientation of the three-dimensional visual recognition device 11. A three-dimensional image viewed from the device 11 is generated by the three-dimensional image generation unit 43 (step S3), and the generated three-dimensional image is output to the three-dimensional display device 10 (step S4).

ここで、入力装置34等を介してシミュレーションの停止が指示されている場合には、表示制御装置12の動作は、終了し、シミュレーションの停止が指示されていない場合には、表示制御装置12の動作は、ステップS1に戻る(ステップS5)。   Here, when the stop of the simulation is instructed via the input device 34 or the like, the operation of the display control device 12 ends. When the stop of the simulation is not instructed, the display control device 12 The operation returns to step S1 (step S5).

このように、本発明の一実施の形態に係るスプレー塗装シミュレートシステム1は、塗料ノズルと塗布パターンとを対応させて格納しておき、選択された塗料ノズルに対応した塗布パターンに基づいて、スプレー塗装をシミュレートするため、塗料の噴射圧や広がりがそれぞれ異なる多様な塗料ノズルに対応したスプレー塗装をシミュレートすることができる。   As described above, the spray coating simulation system 1 according to the embodiment of the present invention stores the paint nozzle and the application pattern in association with each other, and based on the application pattern corresponding to the selected paint nozzle, In order to simulate spray coating, it is possible to simulate spray coating corresponding to various paint nozzles having different spray pressures and spreads of paint.

なお、被塗物情報格納部42に格納されている被塗物情報に、被塗物を展開した展開図と、適切に塗装された被塗物の基準展開図とを含め、シミュレーションの停止後に、3次元画像生成部43が、図9に示すように、擬似的に塗装された被塗物を展開した展開図70と、適切に塗装された被塗物の基準展開図71とを3次元表示装置10または表示装置35に表示するようにしてもよい。   In addition, after the stop of the simulation, the developed object information stored in the coated object information storage unit 42 includes a developed view of the developed object and a reference developed view of the appropriately painted object. As shown in FIG. 9, the three-dimensional image generation unit 43 three-dimensionally develops a development diagram 70 in which a pseudo-painted object is developed and a reference development diagram 71 of an appropriately painted object. You may make it display on the display apparatus 10 or the display apparatus 35. FIG.

このように構成することにより、表示制御装置12は、被塗物に対する塗装を視覚的に評価させることができる。また、表示制御装置12は、展開図70と基準展開図71との対応する画素を比較していくことにより、被塗物に対する塗装を数値で評価することができる。   By configuring in this way, the display control device 12 can visually evaluate the coating on the object to be coated. Further, the display control device 12 can evaluate the painting on the object by numerical values by comparing the corresponding pixels in the development 70 and the reference development 71.

また、本実施の形態においては、3次元表示装置10をプロジェクタ10a、10bと、透過性スクリーン10cとによって構成した例について説明したが、本発明においては、3次元表示装置10は、3次元表示が可能なものであればよく、例えば、3次元画面を有する大型のディスプレイ装置によって構成してもよい。この場合には、3次元視認装置11は、3次元表示装置10の構成により、その構成が適宜変更される。   In the present embodiment, the example in which the three-dimensional display device 10 is configured by the projectors 10a and 10b and the transmissive screen 10c has been described. However, in the present invention, the three-dimensional display device 10 is a three-dimensional display. For example, a large display device having a three-dimensional screen may be used. In this case, the configuration of the three-dimensional viewing device 11 is appropriately changed depending on the configuration of the three-dimensional display device 10.

また、本実施の形態においては、3次元視認装置11の位置および姿勢を検知するセンサ20を超音波センサおよびジャイロによって構成した例について説明したが、本発明のスプレー塗装シミュレートシステムは、モーションキャプチャ等の他の態様で3次元視認装置11の位置および姿勢を検知するようにしてもよい。   In the present embodiment, the example in which the sensor 20 that detects the position and orientation of the three-dimensional visual recognition device 11 is configured by an ultrasonic sensor and a gyro has been described. However, the spray coating simulation system according to the present invention has a motion capture function. The position and orientation of the three-dimensional viewing device 11 may be detected in other manners such as the above.

また、本実施の形態においては、擬似塗装装置13の位置および姿勢を検知するセンサ23を超音波センサおよびジャイロによって構成した例について説明したが、本発明のスプレー塗装シミュレートシステムは、モーションキャプチャ等の他の態様で擬似塗装装置13の位置および姿勢を検知するようにしてもよい。   Further, in the present embodiment, the example in which the sensor 23 for detecting the position and orientation of the pseudo coating apparatus 13 is configured by an ultrasonic sensor and a gyro has been described. However, the spray coating simulation system of the present invention uses a motion capture or the like. You may make it detect the position and attitude | position of the pseudo | simulation coating apparatus 13 in another aspect.

本発明のスプレー塗装シミュレートシステムは、船舶や航空機の一部等のような3次元の被塗物に対するスプレー塗装をシミュレートするシミュレータとして利用することができる。   The spray coating simulation system of the present invention can be used as a simulator for simulating spray coating on a three-dimensional object such as a ship or part of an aircraft.

1 スプレー塗装シミュレートシステム
10 3次元表示装置
10a、10b プロジェクタ
10c 透過性スクリーン
11 3次元視認装置
12 表示制御装置
13 擬似塗装装置
20、23、24 センサ
21a〜21c 超音波発生器
22 トラッキングコントローラ
30 CPU
31 RAM
32 ROM
33 ハードディスク装置
34 入力装置
35 表示装置
36 入出力ポート
40 パターン情報格納部
41 ノズル選択部
42 被塗物情報格納部
43 3次元画像生成部
DESCRIPTION OF SYMBOLS 1 Spray coating simulation system 10 3D display apparatus 10a, 10b Projector 10c Transmissive screen 11 3D visual recognition apparatus 12 Display control apparatus 13 Pseudo coating apparatus 20, 23, 24 Sensor 21a-21c Ultrasonic generator 22 Tracking controller 30 CPU
31 RAM
32 ROM
33 hard disk device 34 input device 35 display device 36 input / output port 40 pattern information storage unit 41 nozzle selection unit 42 article information storage unit 43 three-dimensional image generation unit

Claims (5)

3次元の被塗物に対するスプレー塗装をシミュレートするスプレー塗装シミュレートシステムにおいて、
3次元画像を表示するための3次元表示装置と、
前記3次元画像が表す被塗物を3次元に視認するために利用者に装着される3次元視認装置と、
前記3次元視認装置の位置および姿勢から見た前記被塗物を表す3次元画像を表示させるように前記3次元表示装置を制御する表示制御装置と、
前記被塗物を擬似的に塗装するための擬似塗装装置と、を備え、
前記表示制御装置は、
前記擬似塗装装置が擬似する塗装装置の塗布口に装着される塗料ノズルに対して、前記擬似塗装装置から予め定められた基準位置にある平面に垂直に塗料を塗布したときの塗料の分布を表す塗布パターンを格納するパターン情報格納部と、
前記塗料ノズルが選択されるノズル選択部と、
前記3次元視認装置の位置および姿勢から見た前記被塗物を表す3次元画像を生成する3次元画像生成部と、を有し、
前記3次元画像生成部は、前記擬似塗装装置によって擬似的な塗装が行われている間、前記擬似的な塗装が行われている時間と、前記ノズル選択部によって選択された塗料ノズルに対応して前記パターン情報格納部に格納されている塗布パターンと、前記擬似塗装装置の位置および姿勢とに基づいて、塗装された前記被塗物を表すよう前記3次元画像を生成することを特徴とするスプレー塗装シミュレートシステム。
In a spray coating simulation system that simulates spray coating on a three-dimensional workpiece,
A three-dimensional display device for displaying a three-dimensional image;
A three-dimensional visual recognition device worn by a user in order to visually recognize an object to be coated represented by the three-dimensional image in three dimensions;
A display control device for controlling the three-dimensional display device so as to display a three-dimensional image representing the object to be coated viewed from the position and orientation of the three-dimensional visual recognition device;
A pseudo-coating device for pseudo-coating the article to be coated,
The display control device includes:
The distribution of the paint when the paint is applied perpendicularly to a plane at a predetermined reference position from the pseudo paint apparatus to the paint nozzle attached to the application port of the paint apparatus simulated by the pseudo paint apparatus. A pattern information storage unit for storing application patterns;
A nozzle selection unit from which the paint nozzle is selected;
A three-dimensional image generation unit that generates a three-dimensional image representing the object to be coated viewed from the position and orientation of the three-dimensional visual recognition device;
The three-dimensional image generation unit corresponds to the time during which the pseudo painting is performed while the pseudo painting is performed by the pseudo coating apparatus, and the paint nozzle selected by the nozzle selection unit. The three-dimensional image is generated so as to represent the painted object based on the application pattern stored in the pattern information storage unit and the position and orientation of the pseudo coating apparatus. Spray painting simulation system.
前記塗布パターンは、前記擬似塗装装置の水平方向の塗料の厚みの分布と、前記擬似塗装装置の垂直方向の塗料の厚みの分布とによって構成されていることを特徴とする請求項1に記載のスプレー塗装シミュレートシステム。   The said application | coating pattern is comprised by the distribution of the thickness of the coating material of the horizontal direction of the said pseudo coating device, and the distribution of the thickness of the coating material of the vertical direction of the said pseudo coating device. Spray painting simulation system. 前記3次元画像生成部は、累積した塗料の厚みの分布に応じた濃さで前記3次元画像が表す被塗物を着色することを特徴とする請求項1または請求項2に記載のスプレー塗装シミュレートシステム。   3. The spray coating according to claim 1, wherein the three-dimensional image generation unit colors an object to be coated that is represented by the three-dimensional image with a density corresponding to a distribution of accumulated paint thicknesses. 4. Simulated system. 前記3次元画像生成部は、累積した塗料の厚みの分布に応じた配色で前記3次元画像が表す被塗物を着色することを特徴とする請求項1または請求項2に記載のスプレー塗装シミュレートシステム。   3. The spray coating simulation according to claim 1, wherein the three-dimensional image generation unit colors an object to be coated represented by the three-dimensional image with a color scheme corresponding to a distribution of accumulated paint thicknesses. System. 前記3次元画像生成部は、前記被塗物を展開した展開図と、適切に塗装された前記被塗物の基準展開図とをそれぞれ表す画像を生成することを特徴とする請求項1乃至請求項4の何れかに記載のスプレー塗装シミュレートシステム。   The three-dimensional image generation unit generates an image representing a developed view of the object to be developed and a reference developed view of the object to be coated appropriately, respectively. Item 5. The spray coating simulation system according to any one of Items 4 to 6.
JP2010207881A 2010-09-16 2010-09-16 Spray painting simulation system Active JP5466606B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2010207881A JP5466606B2 (en) 2010-09-16 2010-09-16 Spray painting simulation system
PCT/JP2011/005249 WO2012035782A1 (en) 2010-09-16 2011-09-16 Spray coating simulation system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010207881A JP5466606B2 (en) 2010-09-16 2010-09-16 Spray painting simulation system

Publications (2)

Publication Number Publication Date
JP2012063990A JP2012063990A (en) 2012-03-29
JP5466606B2 true JP5466606B2 (en) 2014-04-09

Family

ID=45831267

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010207881A Active JP5466606B2 (en) 2010-09-16 2010-09-16 Spray painting simulation system

Country Status (2)

Country Link
JP (1) JP5466606B2 (en)
WO (1) WO2012035782A1 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6909632B2 (en) * 2017-05-16 2021-07-28 タクボエンジニアリング株式会社 Teaching method for painting robots
JP7184614B2 (en) * 2018-11-30 2022-12-06 ダイハツ工業株式会社 Painting simulation evaluation system
KR102383408B1 (en) * 2020-07-07 2022-04-06 감기백 Simulation apparatus for painting
KR102383412B1 (en) * 2020-07-07 2022-04-06 감기백 Simulation system for painting

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05324798A (en) * 1992-05-20 1993-12-07 Torika:Kk Method for simulation visually predicting the state of coating with coating material on three-dimensional object
KR100809479B1 (en) * 2006-07-27 2008-03-03 한국전자통신연구원 Face mounted display apparatus and method for mixed reality environment

Also Published As

Publication number Publication date
JP2012063990A (en) 2012-03-29
WO2012035782A1 (en) 2012-03-22

Similar Documents

Publication Publication Date Title
US11850511B2 (en) Systems and methods for rendering a virtual content object in an augmented reality environment
KR101262848B1 (en) Apparatus of reconfigurable platform for virtual reality based training simulator
US11176748B2 (en) Image processing apparatus, image processing method, and program
CN102449680B (en) Information presentation device
CN104897091A (en) Articulated arm coordinate measuring machine
US20160343166A1 (en) Image-capturing system for combining subject and three-dimensional virtual space in real time
TWI390326B (en) Lighting device
JP2010522380A (en) System and method for updating dynamic 3D display by user input
JP2008219772A (en) Stereoscopic image display system
JP5466606B2 (en) Spray painting simulation system
CN105359061A (en) Computer graphics presentation system and method
CN109255843A (en) Three-dimensional rebuilding method, device and augmented reality AR equipment
JP6319804B2 (en) Projection image generation apparatus, projection image generation method, and projection image generation program
KR20090003079A (en) Secondary image painting training system and method
KR20100067155A (en) Apparatus and method for providing realistic contents through augmented book
CN101828068B (en) Illuminating apparatus
KR101299191B1 (en) Apparatus and method for projection image into three-dimensional model
US11341716B1 (en) Augmented-reality system and method
KR101919077B1 (en) Method and apparatus for displaying augmented reality
JP2010525375A (en) System for projecting a three-dimensional image on a two-dimensional screen and corresponding method
KR101860680B1 (en) Method and apparatus for implementing 3d augmented presentation
WO2020045254A1 (en) Display system, server, display method, and device
Sommer et al. View-dependent Virtual and Augmented Reality for Machine Tools
JP4925369B2 (en) Lighting device
Novak-Marcincin et al. Interactive monitoring of production process with use of augmented reality technology

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130308

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140121

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140124

R150 Certificate of patent or registration of utility model

Ref document number: 5466606

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250