JP2006172350A - Image recording system and recorded image displaying method - Google Patents
Image recording system and recorded image displaying method Download PDFInfo
- Publication number
- JP2006172350A JP2006172350A JP2004367189A JP2004367189A JP2006172350A JP 2006172350 A JP2006172350 A JP 2006172350A JP 2004367189 A JP2004367189 A JP 2004367189A JP 2004367189 A JP2004367189 A JP 2004367189A JP 2006172350 A JP2006172350 A JP 2006172350A
- Authority
- JP
- Japan
- Prior art keywords
- image
- camera
- recording
- recorded
- camera devices
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Abstract
Description
本発明は、画像記録システムおよび記録画像の表示方法に関し、特に、生産ライン等の移動物体を連続して撮像する画像記録システムおよび記録画像の表示方法に関するものである。 The present invention relates to an image recording system and a recorded image display method, and more particularly to an image recording system and a recorded image display method for continuously capturing moving objects such as production lines.
従来、生産ライン上の移動物体、例えば、カメラや無線機等の製品が製品組立てライン上を移動する場合、その移動する製品を監視用カメラで撮像し、モニタ上に表示したり、また、その画像を記録装置に記録し、不良製品の早期発見や歩留まりの向上のための生産管理に利用される画像記録システムが知られている。従来のこの種の画像記録システム、例えば、固体撮像装置(例えば、特許文献1参照)について、図7を用いて説明する。図7において、ベルトコンベア701に組立て用カメラ部品702a、702b、702c、702d、・・・(なお、カメラ部品を総称する場合は、カメラ部品702と称する。)が一定の間隔で乗せられており、ベルトコンベア701が矢印703で示す方向に移動している。ベルトコンベア701上のカメラ部品702も矢印703の示す方向に移動する。704aおよび704bは、センサを示している。このセンサは、例えば、704aは、LED等の発光素子、704bは、発光素子704aからの光を受光する受光素子(フォトセンサ)であり、ベルトコンベア701にカメラ部品702が供給される位置に設置されている。
Conventionally, when a moving object on a production line, for example, a product such as a camera or a radio device moves on a product assembly line, the moving product is imaged with a monitoring camera and displayed on a monitor. There is known an image recording system that records an image on a recording device and is used for production management for early detection of defective products and improvement of yield. A conventional image recording system of this type, for example, a solid-state imaging device (see, for example, Patent Document 1) will be described with reference to FIG. In FIG. 7, the
センサ704は、供給されるカメラ部品702を次々と感知し、感知する度にカメラ部品702が通過したことを示す信号をトリガー発生器705に次々と出力する。トリガー発生器705は、感知したことを示す信号によってトリガーパルスを生成し、カメラ装置706に出力する。カメラ装置706は、入力されたトリガーパルスに基づいて予め定められたタイミングで、割り当てられた撮像視野範囲を撮像し、撮像した画像を画像処理装置707に出力する。なお、予め定められたタイミングは、例えば、センサ704がカメラ部品702を感知してからカメラ装置706の撮像視野に入る時間ST1を予め設定されている。
The sensor 704 sequentially senses the supplied camera component 702 and outputs a signal indicating that the camera component 702 has passed each time to the
画像処理装置707は、入力された画像を、その撮像システムに適応した画像信号のフォーマットに変換してモニタ708に出力する。モニタ708は、入力された画像信号から画像を再生して表示する。また、モニタ708には、カメラ装置706で撮像された画像をリアルタイムで表示することもできるが、例えば、画像処理装置707で適宜表示間隔を調整し、カメラ部品702aの像709aとカメラ部品702bの像709bを同一のモニタ画面に表示することもできる。この場合のカメラ部品702aの像709aとカメラ部品702bの像709bとの間隔ST2は、ST1より短く設定されている。
The
而して、上述したような工場の生産ライン等で例えば、組立ての部品を撮影する場合、生産ラインは、非常に長く、最初に組立て部品702が供給される場合にはカメラ装置706で撮像ができるが、組立ての部品702がベルトコンベア701の移動で移動すると、固定されているカメラ装置706では、その後の例えば、組立ての様子を撮像できない。この問題を解決するために、例えば、雲台機能を備えたカメラ装置を使用して、組立ての部品702を追いかけて撮影するか、あるいは、複数台のカメラを用意し、各々の映像を個別に記録する方法が用いられていた。
Thus, for example, when photographing a part to be assembled on the production line of the factory as described above, the production line is very long. When the assembly part 702 is supplied for the first time, imaging is performed by the
しかしながらこのような従来の方法では、カメラ装置の方向が移動するため、写らない範囲(死角)が生じたり、また、多数の部品を同時に撮像するには、かなり無理が生じるという問題がある。また、一連の組立て部品の組立工程を見る場合には、個々に録画した画像を、その都度、別々に探し出して表示させる必要があり、工程管理の面からもできるだけ短時間にスムーズに一連の組立て工程が分かる画像の表示方法が望まれている。 However, in such a conventional method, since the direction of the camera device moves, there is a problem that a non-imageable range (dead angle) is generated, and that it is extremely difficult to image many parts simultaneously. In addition, when viewing the assembly process of a series of assembled parts, it is necessary to search and display the individually recorded images separately each time. There is a demand for a method of displaying an image that shows the process.
以上説明したように従来の方法では、カメラ装置の方向が移動するため、写らない範囲が生じたり、また、多数の部品を同時に撮像するには、かなり無理が生じる。また、一連の組立て部品の組立工程を見る場合には、個々に録画した画像を、その都度探し出して表示させる必要があり、工程管理の面からもできるだけ短時間に一連の組立て工程が分かる画像の表示方法が望まれている。 As described above, in the conventional method, since the direction of the camera device moves, a range that does not appear is generated, and it is extremely difficult to capture a large number of parts simultaneously. In addition, when viewing the assembly process of a series of assembly parts, it is necessary to search and display each recorded image each time. From the viewpoint of process management, an image that shows a series of assembly processes in as short a time as possible. A display method is desired.
本発明の目的は、移動物体の組立てや製造の過程が容易に把握できる画像記録システムおよび記録画像の表示方法を提供することである。 SUMMARY OF THE INVENTION An object of the present invention is to provide an image recording system and a recorded image display method capable of easily grasping the process of assembling and manufacturing a moving object.
本発明の他の目的は、移動物体の組立てや製造の管理データを蓄積できる画像記録システムを提供することである。 Another object of the present invention is to provide an image recording system capable of accumulating management data for assembling and manufacturing moving objects.
本発明の更に他の目的は、蓄積された移動物体の組立てや製造の管理データを容易に表示できる記録画像の表示方法を提供することである。 Still another object of the present invention is to provide a recorded image display method capable of easily displaying management data of assembly and manufacturing of accumulated moving objects.
本発明の画像記録システムは、適宜移動する対象物を順次撮像する複数のカメラ装置と、少なくとも上記複数のカメラ装置のそれぞれの視野範囲に上記対象物が搬入される時点を検出する検出手段と、上記複数のカメラ装置で撮像された画像を記録する記録装置とを有し、上記対象物が移動するに従って、複数の上記検出手段が順次トリガ信号を発生し、順次発生する上記トリガ信号に基づいて複数の上記カメラ装置で撮像された画像を順次上記記録装置に記録するように構成される。 The image recording system of the present invention includes a plurality of camera devices that sequentially capture an object that moves as appropriate, and a detection unit that detects a time point at which the object is carried into at least the field of view of each of the plurality of camera devices. A recording device for recording images picked up by the plurality of camera devices, and the plurality of detecting means sequentially generate trigger signals as the object moves, and based on the trigger signals generated sequentially Images captured by the plurality of camera devices are sequentially recorded in the recording device.
また、本発明の画像記録システムにおいて、上記移動する対象物が、所定の間隔に位置された複数の対象物であり、複数の上記検出手段は、それぞれの上記対象物がそれぞれの上記カメラ装置の視野範囲に入る時点を検出し、それぞれの上記カメラ装置がそれぞれの対象物を撮像すると共に、複数の上記検出手段からのトリガ信号に基づいて複数の上記カメラ装置で撮像された画像を上記対象物を区別する情報と共に順次上記記録装置に記録するように構成される。 Further, in the image recording system of the present invention, the moving object is a plurality of objects positioned at a predetermined interval, and the plurality of detection means are configured such that each of the objects corresponds to each of the camera devices. A point in time when the camera enters the field of view is detected, and each of the camera devices captures an image of each object, and images captured by the plurality of camera devices based on trigger signals from the plurality of detection means are captured by the object. Are sequentially recorded on the recording device together with the information for distinguishing them.
また、本発明の画像記録システムにおいて、上記複数のカメラ装置と、複数の上記検出手段は、生産ラインに沿った生産工程毎に配置されている。 In the image recording system of the present invention, the plurality of camera devices and the plurality of detection means are arranged for each production process along the production line.
また、本発明の画像記録システムにおいて、更に、上記生産工程を表示する表示手段を上記生産工程の位置に配置し、上記生産工程を視野範囲に持つ上記カメラ装置により上記対象物と共に上記表示手段を撮像するように構成される。 Further, in the image recording system of the present invention, a display means for displaying the production process is further arranged at the position of the production process, and the display means is displayed together with the object by the camera device having the production process in a visual field range. Configured to image.
また、本発明の画像記録システムにおいて、上記記録装置は、上記カメラ装置で撮像された画像と、少なくとも上記カメラ装置のID番号および撮像日時に関する情報を一緒に記録するように構成される。 In the image recording system of the present invention, the recording device is configured to record an image captured by the camera device together with at least information related to the ID number and imaging date / time of the camera device.
更に、本発明は、適宜移動する複数の対象物を順次撮像する複数のカメラ装置と、上記複数のカメラ装置のそれぞれの視野範囲に上記対象物が入る時点を検出する検出手段と、上記複数のカメラ装置で撮像された画像を上記対象物を区別する情報と共に記録する記録装置とを有する画像記録システムであって、上記記録装置に記録された画像データを対象物を区別する情報に基づいて検索し、上記対象物の所定の画像データを上記記録装置から読出し、表示部に所定対象物の上記移動順序に従って上記所定対象物の画像を表示するように構成される。 Furthermore, the present invention provides a plurality of camera devices that sequentially image a plurality of objects that move as appropriate, a detection unit that detects a time point when the objects enter the respective visual field ranges of the plurality of camera devices, An image recording system having a recording device that records an image captured by a camera device together with information for distinguishing the object, and searches image data recorded in the recording device based on the information for distinguishing the object Then, the predetermined image data of the object is read from the recording device, and the image of the object is displayed on the display unit in accordance with the moving order of the object.
以上説明したように、本発明によれば、ベルトコンベアで移動する移動物体の組立てや製造の過程を記録でき、また、多数の部品を同時に撮像することが可能であるため、不良品のチェックは勿論のこと、どの製造工程で不良が発生したか、また、発生原因を特定することが容易となる。また、製品の工程管理、品質管理等の管理データを蓄積できることは勿論のこと、管理データを簡単に検索し、表示できる画像記録システムおよび記録画像の表示方法を実現できる。 As described above, according to the present invention, the process of assembling and manufacturing a moving object moving on a belt conveyor can be recorded, and a large number of parts can be imaged simultaneously. Of course, it becomes easy to specify in which manufacturing process the defect has occurred and the cause of the occurrence. In addition, management data such as product process management and quality control can be stored, as well as an image recording system and a recorded image display method capable of easily searching and displaying management data.
以下、本発明に係る画像記録システムおよび記録画像の表示方法を図面に示した発明の実施の形態を参照して詳細に説明する。図1は、本発明の一実施例の概略構成を説明するための図で、例えば、工場の生産ラインを示している。101は、生産する対象物を矢印方向(移動方向)に搬送するベルトコンベア(生産ライン)である。102−1、102−2、102−3、・・・は、ほぼ一定の間隔で移動しながら例えば組立てられる部品を示している。なお、部品を総称する場合は、部品102と称する。103−1、103−2、103−3、・・・103−Nは、移動する部品102を撮像するカメラ装置で、生産ライン101に沿ってN台配列されている。なお、カメラ装置を総称する場合は、カメラ装置103と称する。各カメラ装置103は、生産ラインの各工程A、B、C、・・・N毎に配置され、また、各カメラ装置の撮像視野範囲で各工程を移動する部品102を撮像できるように設定されている。通常、この視野範囲は、例えば、60度程度に設定されており、1台のカメラ装置の視野範囲には、1個の部品102が搬送される。なお、部品102が互いに区別できるような表示がなされている場合等では、2個以上の部品が同じ視野範囲に入っても区別できるので問題はない。但し、以下の実施例では、1台のカメラ装置が1個の製品を撮像する場合を例に上げて説明するものとする。
Hereinafter, an image recording system and a method for displaying a recorded image according to the present invention will be described in detail with reference to embodiments of the invention shown in the drawings. FIG. 1 is a diagram for explaining a schematic configuration of an embodiment of the present invention, and shows, for example, a production line of a factory.
104−1、104−2、104−3、・・・104−Nは、Webエンコーダで、各カメラ装置で撮像された画像を適宜符号化し、伝送路107に送出する。なお、Webエンコーダを総称する場合は、Webエンコーダ104と称する。Webエンコーダ104は、必要に応じて画像データをJPEG(Joint Photographic Experts Group)あるいはMPEG―2(Moving Picture Experts Group -2)やMPEG―4の技術を用いて圧縮し、伝送路に送出することもできる。また、Webエンコーダ104は、各カメラ装置103と一体に構成することも可能である。106は、それぞれ複数のセンサを示す。各センサ106は、例えば、LED等の発光素子106−1a、106−2a、・・・106−Naと受光素子106−1b、106−2b、・・・106−Nbがそれぞれ対をなし、例えば、発光素子106−1aからの光を受光素子(フォトセンサ)106−1bが受光するように構成されている。このセンサ106は、例えば、各カメラ装置103の撮像範囲に部品102が移動する入口付近に配置され、部品102がカメラ装置103の視野範囲に入ると部品102を検知し、検知信号(トリガ信号)がセンサからWebエンコーダに入力される。なお、センサ106は、各カメラ装置103の撮像範囲の入口と出口に設けることもできるが、次のカメラ装置103の出口側のセンサは、次のカメラ装置の撮像範囲の入り口側のセンサを兼ねることもできる。108は、記録装置を示し、各カメラ装置103で撮像された画像がWebエンコーダ104、伝送路、例えば、LAN(Local Area Network)107を介して記録装置108に伝送され、記録される。
104-1, 104-1, 104 -N are Web encoders that appropriately encode images captured by the camera devices and send them to the
次に、記録装置108の具体的な構成について、図2を用いて説明する。図2は、本発明で用いられる記録装置108の概略構成を示すブロック図である。図2において、201は、CPU(中央処理装置)であり、記録装置108の動作を制御する。202は、記録部であり、各カメラ装置103で撮像された画像を記録する。この記録部202は、半導体メモリ、HDD(ハードデイスク)、磁気テープ、DVD(Digital Versatile Disc)あるいは光磁気デイスクを使用することができる。203は、メモリ部であり、画像記録装置108のプログラムが実行可能な状態で格納され、画像記録装置が駆動されると、逐次このプログラムが読み出されて実行される。また、メモリ部203は、カメラ装置からの画像データや記録部202から読み出された画像データが一時的に記録されるワークメモリ(Work Memory)としての機能も有する。
Next, a specific configuration of the
204は、I/F部(インターフェース部)であり、伝送路107からの画像データを入力するためのインタフェースである。圧縮/伸張部205は、必要に応じて、取り込んだ画像データを圧縮したり、圧縮された画像データを伸張したりするモジュールである。例えば、Webエンコーダ104で既に画像圧縮された画像データを伸張して記録装置202に記録したり、あるいはWebエンコーダ104で画像圧縮されないで送られてきた画像データを例えば、JPEGで圧縮して記録部202に記録する等の動作をする。データ管理部206は、記録された画像データに関する各種データの管理が行われる。このデータ管理部206については後述する。
An I / F unit (interface unit) 204 is an interface for inputting image data from the
207は、入出力部で、カメラ装置103から取込まれた画像または記録部202に記録されている画像をモニターに表示したり、別の部署に伝送したり、あるいは別の部署からの画像を入力するためのものである。208は、操作部、例えば、キーボード、マウス等で構成され、ユーザが記録装置108の必要な操作をするためのものである。209は、バスラインで、CPU201と各装置を接続するためのものである。
An input /
次に、図1に示す本発明の画像記録システムの動作を図3を用いて説明する。まず、ステップ301では、例えば、組立て部品102−1が生産ライン101に投入され、ベルトコンベアで移動し、入口側センサ106−1が組立て部品102−1を検知すると、受光素子(フォトセンサ)106−1bがトリガパルスを発生する。このトリガパルスは、Webエンコーダ104−1に供給される。また、同時にこのトリガパルスは、記録装置108にも伝送される。
Next, the operation of the image recording system of the present invention shown in FIG. 1 will be described with reference to FIG. First, in
ステップ302では、上記トリガパルスがWebエンコーダ104−1に供給されることで、カメラ装置103−1は、組立て部品102−1の撮像を開始する。カメラ装置103−1は、例えば、NTSC方式のCCD(Charge Coupled Device)撮像装置で構成され、30フレーム/秒で組立て部品102−1を撮影し、その画像をWebエンコーダ104−1に供給する。Webエンコーダ104−1では、供給された画像を符号化し、また、必要に応じて圧縮し、画像データを生成する。本発明の実施例では、NTSC方式の画像1フレームを500Kbitで伝送路107を介して記録装置108に送信したとすると、NTSC方式の画像30フレーム/秒では、15,000Kbpsの伝送速度で伝送されることとなる。
In
ここで、画像データの伝送について説明する。図4(A)で示されるD11、D21、・・・Dn1は、Webエンコーダ104−1、104−2、・・・104−Nで作成された画像データを示す。この画像データD11、D21、・・・Dn1は、伝送路107を介して記録装置108に伝送される。しかしながら、これらの画像データを伝送する場合、例えば、伝送路107がイーサーネット(Ethernet)(登録商標)の場合、1度に伝送できるデータサイズであるMTU(Maximum Transmission Unit)のサイズは、所定の値に設定されているので、例えば、画像データD11を送るには、適宜D11−1、D11−2、・・D11−pに分割し、伝送される。図4(B)は、この分割した画像データを伝送するための伝送のフォーマットを示すもので、D11−1は、画像データD11の分割した画像データを示し、HTTP(Hyper Text Transfer Protocol)、TCP(Transmission Control Protocol)、IP(Internet Protocol)は、イーサーネットでデータを伝送する場合のヘッダ情報を付加している。なお、他の画像データD21、・・・Dn1についても同様である。
Here, transmission of image data will be described. Dn1 shown in FIG. 4A indicates image data created by the Web encoders 104-1, 104-2,... 104-N. The image data D11, D21,... Dn1 are transmitted to the
ステップ303は、ステップ301で発報されたトリガパルスを記録装置108が受信すると、記録装置108では、CPU201の制御が開始され、Webエンコーダ104−1からの画像データD11を受信し、記録部202に画像データD11を記録する。図4(C)は、記録部202の記録の状態を模式的に示したもので、記録部202の最初の番地11にWebエンコーダ104−1からの画像データD11が記録されることを示している。同様に2番目の番地12には、Webエンコーダ104−2からの画像データD12が記録されることを示している。ここで、mは、組立て部品102の個数に対応する。従って、画像データDmnは、組立て部品102−mをカメラ装置103−Nで撮像して得られる画像データであり、m、nは、記憶部202の番地(m、n)も表している。
In
ステップ304は、生産ライン上の組立て部品102−1が更に移動して、出口側のセンサ106−2が組立て部品102−1を検知し、受光素子106−2bがトリガパルスを発生すると、このトリガパルスは、Webエンコーダ104−2を介して記録装置108に伝送され、ステップ305に進む。出口側のセンサの受光素子106−2bがトリガパルスを発生するまでの間は、記録装置108は、カメラ装置103−1の画像データの記録を継続する。
In
ステップ305では、受光素子106−2bからのトリガパルスに基づいて記録装置108は、Webエンコーダ104−1からの組立て部品102−1の画像データの記録を終了する。
In
ステップ306では、上記受光素子106−2bからのトリガパルスに基づいてカメラ装置103−1の撮像動作を終了する。
In
以上の動作が生産ライン101上を移動する組立て部品102−2、102−3・・・についても同様に行われる。なお、カメラ装置103は、上記実施例のように入口側センサで組立て部品102の撮影を開始し、出口側センサで撮影を終了することもできるが、カメラ装置は、動作をONした場合、撮像映像が安定するまでには、数秒程度かかるので、常に撮影状態とし、記録装置108の記録部に記録するタイミングをトリガパルスで制御する方が実用的である。また、伝送路107のデータ伝送容量は、一般的に100Mbps程度である。前述したNTSC方式の画像30フレーム/秒では、15,000Kbpsの伝送容量で伝送されるので、理論的には、100Mbpsの伝送路では、約6台のカメラ装置103からの画像データが記録装置108に記録できることとなる。従って、6台以上のカメラ装置103からの画像データを記録装置108に蓄積する場合や伝送路の伝送容量が少ない場合には、伝送する画像の枚数を少なくするか、画像の圧縮率を高くしたり、解像度を低くする等の対策が必要である。なお、このような生産ラインの組立て部品102を撮像する場合、常に、30フレーム/秒で撮像する必要もないので、カメラ装置103の撮像範囲内で、数枚の画像データを間欠的に伝送し、記録することで十分である。また、その方が画像データの伝送容量を少なくでき、伝送路107の利用効率を上げることができるので、多数のカメラ装置103を設置できると言う効果が期待できる。また、間欠的に数枚の画像データを伝送するには、例えば、記録装置108にカウンタを設け、2秒に1枚のフレームを要求するようにカウンタを設定することで実現できる。
The above operation is performed in the same manner for the assembly parts 102-2, 102-3,... Moving on the
次に、カメラ装置103で撮像した画像の記録方法について図5を用いて説明する。組立て部品102−1が工程Aに差し掛かると、前述したようにセンサ106−1が感知し、Webエンコーダ104−1にトリガパルスが供給される。これによりカメラ装置103−1と記録装置108が駆動される。このトリガパルスにより記録装置108は、カメラ装置103−1の画像データを受信する。図5のD11は、カメラ装置103−1で、工程Aの期間に撮像された画像f11枚分のデータを示している。この組立て部品102−1は、更に、生産ライン101上を移動し、工程Aを終了し工程Bに搬送される。工程Bに入ると、センサ106−2が発報し、上述と同様にカメラ装置103−2が組立て部品102−1を撮像し、撮像された画像が記録装置108に伝送され、記録される。図5のD12は、カメラ装置103−2で、工程Bの期間に撮像された画像f12枚分のデータを示している。このように組立て部品102−1が生産ライン101の工程A、B、・・・Nを順次移動するに従ってカメラ装置103−1、103−2、・・・103−Nにより順次撮像されるので、記録装置108には、図5に示すようにD11、D12、・・・D1nの画像データとして記録される。なお、記録装置108の記録部202には、図4(B)に示されるように番地(1、1)(1、2)(1,3)・・・(1、n)にそれぞれD11、D12、・・・D1nとして記録される。
Next, a method for recording an image captured by the
而して、組立て部品102−1が生産ライン101の工程Aから工程Bに移動すると、新たな組立て部品102−2が工程Aに搬入され、前述と同様にセンサ106−1が発報し、Webエンコーダ104−1にトリガパルスが供給される。これによりカメラ装置103−1と記録装置108が駆動される。このトリガパルスにより記録装置108は、カメラ装置103−1で組立て部品102−2を撮像した画像データを受信する。図5のD21は、カメラ装置103−1で、工程Aの期間に組立て部品102−2を撮像した画像f21枚分のデータを示している。この組立て部品102−2は、更に、生産ライン101上を移動し、工程Aを終了し工程Bに搬送される。工程Bに入ると、センサ106−2が発報し、上述と同様にカメラ装置103−2が組立て部品102−2を撮像し、撮像された画像が記録装置108に伝送され、記録される。図5のD22は、カメラ装置103−2で、工程Bの期間に組立て部品102−2を撮像した画像f22枚分のデータを示している。このようにすると、生産ライン101上を搬送される全ての組立て部品102の各工程毎の画像が図5に示すように、m×n枚の画像データとして記録装置108の記録部202に記録される。その時の記録装置108の記録の状態を図4(B)で示す。
Thus, when the assembly part 102-1 moves from the process A to the process B of the
次に、データ管理部206の動作について説明する。データ管理部206は、記録部202に記録されている画像データを適宜加工して製品の製造管理を行なうための管理データを出力したり、あるいはモニタに表示するためのものである。この一実施例について図6を用いて説明する。図6は、組立て部品102−1、102−2、・・・102−mの各組立ての過程の画像を表示したものである。このデータは、例えば、組立て部品102とカメラ装置103との関係を定めて記憶部202に記憶される時にアドレス(m、n)と対応づけて記憶している。従って、アドレス(1、n)のnが1からnの番地の画像データ(D11、D12、・・D1n)を記憶部202から読み出して表示すると、図6に示される組立て部品102−1が工程Aから搬入されて順次工程を移動し、最終工程Nで組立てを終了するまでの一連の組立ての経過が一覧表のように表示することができる。同様に組立て部品102−2、・・・102−mのそれぞれの一連の組立ての経過を一覧表のように表示することができる。
Next, the operation of the
このように生産ライン上を移動する組立て部品の組立ての様子を各組立て工程毎に表示することにより組立て工程における組立ての不良、例えば、部品搭載ミスや部品の変形、部品取付けの不具合、その他各種の不良を各工程毎に把握できるので、不良になった工程の発見およびその工程の改善が迅速に行うことができる。また、上記実施例では、部品の組立てラインの実施例で説明したが、部品の組立てラインに限定されるものではなく、各種の製造ライン等の生産の過程を記録することにより製品の管理や製造工程管理等の必要なもの全てに適応できることは言うまでもない。 By displaying the state of assembly parts moving on the production line in this way for each assembly process, assembly defects in the assembly process, for example, component mounting errors, part deformation, part mounting defects, and other various types Since the defect can be grasped for each process, the process that has become defective can be found and improved quickly. In the above embodiment, the parts assembly line has been described as an example. However, the present invention is not limited to the parts assembly line, and it is possible to manage and manufacture products by recording production processes of various production lines. It goes without saying that it can be applied to all necessary processes such as process control.
図8は、本発明の他の一実施例を説明するための概略構成図である。図8において109−1、109−2、・・・109−nは、表示板を示し、それぞれの表示板には、各工程の番号や記号が表示されている。例えば、工程Aには、Aの記号、工程Bには、Bの記号を表示した表示板がそれぞれカメラ装置103の撮像範囲の視野内に入る位置に設置されている。110−1、110−2、・・・は、組立て部品のハンドリング装置を示し、組立て部品に不良品が発見された場合、不良品を取除くハンドリング装置である。なお、図1と同じものには同じ符号が付されている。また、図8に示す画像記録システムの動作は、図1に示す画像記録システムと同じであるので詳細な動作説明は省略する。
FIG. 8 is a schematic configuration diagram for explaining another embodiment of the present invention. In FIG. 8, reference numerals 109-1, 109-2,... 109-n denote display plates, and the numbers and symbols of the respective steps are displayed on the respective display plates. For example, the display plate displaying the symbol A in process A and the symbol B in process B is installed at a position that falls within the field of view of the imaging range of the
而して、前述したように工程管理の目的のために組立て部品102の一連の組立ての様子を画像として表示することについて図6で説明した。しかしながら多数の画像データが一度に表示装置の表示部に表示される場合、どの画面がどの工程で撮像された画像かを判別するのは容易ではない。従って本発明では、図8で説明したように各カメラ装置103で、その視野内に設置された工程表示板109が組立て部品102の撮影と同時に撮影されるようになっている。図9(A)は、その再生画像を示している。即ち、再生画面901には、組立て部品102−1の画像と共に工程Aを示す表示板109−1が同時に表示される。従って、この表示画面901は、カメラ装置103−1で工程Aの範囲で撮像された画像であることが容易に理解される。また、図9(B)は、カメラ装置103−2で工程Bを撮像した場合の再生画像を表示したものである。この画像では、組立て部品102−1に組立て部品902が結合されたものが撮影され、合わせてB表示板109−2が表示されている。従って、工程Bでカメラ装置103−2で撮像されたことが容易に認識できる。このように込み立ての工程の特定が容易にできるという特徴がある。
Thus, as described above, displaying a series of assembling states of the
更に、図9(A)、図9(B)の画面では、カメラIDや撮像日時が表示されている。一般に図1や図8に示す画像記録システムにおいて、複数のカメラ装置103は、それぞれ自分のカメラ装置のIDを設定しているのが普通である。このIDは、画像の付属データとして記憶装置に記憶している。従って、各カメラ装置で撮像した画像をモニタに表示する際には、表示される画像に記憶装置に記憶されているIDを重畳して表示するようになされている。例えば、図9(A)の画像は、カメラ装置103−1(カメラA)で撮像された画像であるので、カメラIDとして103−1(カメラ番号とIDを同じにした場合を示す。)が表示される。同様に図9(B)では、カメラID103−2(カメラB)が表示される。また、カメラ装置103あるいはWebエンコーダ104は、時計機能を有し、撮像画像には、付属情報として撮影日時を記憶装置に記憶しておき、各カメラ装置で撮像した画像をモニタに表示する際には、表示される画像に記憶装置に記憶されている撮影日時を重畳して表示するようになされている。例えば、図9(A)では、表示画面に20041112101103が表示されている。これは、この画像が2004年11月12日、10時11分03秒に撮影されたことを示すものである。更に、組立て部品に製品番号を表示すると、これが一緒に撮像されるので、部品を特定することが可能である。なお、上述した工程表示板109の画像、製品番号、撮像日時あるいは記録装置に記録されたアドレス情報等は、製品(対象物)を特定する情報であるので対象物の区別情報と称する。
Further, on the screens of FIGS. 9A and 9B, the camera ID and the imaging date and time are displayed. In general, in the image recording system shown in FIG. 1 or FIG. 8, it is normal for a plurality of
以上詳述したように撮像画面に工程表示板、カメラIDおよび撮像日時等を表示することにより表示される画像がどの工程で、どのカメラ装置で、何時撮像されたかが容易に把握できるので、データ管理、生産管理等の生産に関する種々の管理データを入手することが可能となる。また、工程表示板の画像、カメラIDあるいは撮像日時を各画像と対応付けて記録部202に記録することにより必要な画像を検索して容易に表示することもできる。なお、工程表示板の画像、カメラIDあるいは撮像日時等の対象物の区別情報は、画像処理による特徴の一致度検索、ID検索、日時検索等により容易に該当する画像を表示させることが可能であり、検索方法については、周知の方法であるので、詳細な説明は省略する。
As described above in detail, it is possible to easily grasp which process and which camera image was displayed by displaying the process display board, camera ID, imaging date and time, etc. on the imaging screen. Various management data relating to production such as production management can be obtained. In addition, a necessary image can be retrieved and easily displayed by recording the image on the process display board, the camera ID, or the imaging date and time in the
また、先の説明では、不良品を取除くハンドリング装置110−1、110−2を説明したが、万一、不良品が発生し、組立て部品102−2がハンドリング装置110−1で取除かれた場合、即ち、図8の組立て部品102−2(点線で示す。)が取除かれた場合、組立て部品102−2は、センサ106−4以降のセンサでは、検知されなくなり、このままでは次に移動してきた組立て部品102−3が組立て部品102−2として誤って記録されることとなる。これを避けるためにハンドリング装置110が動作して、組立て部品102−2が取除かれた場合、その情報をカメラ103、Webエンコーダ104、記録装置108に通知し、取除かれた組立て部品102−2の撮影、記録を行わないようにする。
In the above description, the handling devices 110-1 and 110-2 for removing defective products have been described. However, in the unlikely event that defective products are generated, the assembly component 102-2 is removed by the handling device 110-1. In other words, when the assembly part 102-2 (shown by a dotted line) in FIG. 8 is removed, the assembly part 102-2 is not detected by the sensors after the sensor 106-4. The moved assembly part 102-3 is erroneously recorded as the assembly part 102-2. In order to avoid this, when the handling device 110 operates and the assembly component 102-2 is removed, the information is notified to the
図10は、上記のようにして組立て部品102−2が取除かれた場合の組立て部品102−1、102−2、・・・102−mの各組立ての過程の画像を表示したものである。図10から明らかなように組立て部品102−2は、カメラ装置103−1、103−2で撮影、記録された画像D21、D22は、表示されるが、それ以降の画像データは、記録されていない。従って、図10の一連の組立て工程の画像を解析すると、組立て部品102−2は、工程Cで不良になったことが容易に判断できる。 FIG. 10 shows an image of the process of assembling the assembly parts 102-1, 102-2,... 102-m when the assembly part 102-2 is removed as described above. . As is apparent from FIG. 10, the assembly part 102-2 displays the images D21 and D22 photographed and recorded by the camera apparatuses 103-1 and 103-2, but the subsequent image data is recorded. Absent. Therefore, by analyzing the images of the series of assembly processes in FIG. 10, it can be easily determined that the assembly component 102-2 has become defective in the process C.
このように、カメラ装置を順次切替えて対象物の画像を撮像し、記録することで、カメラ装置の死角が生じることなく、また、ネットワークカメラを用いることで同時に複数の対象物の画像データを記録することができ、対象物の製造の過程を一覧表示できる等の特徴がある。なお、本実施例では、ネットワークカメラを用いる場合について説明したが、映像のアナログ信号(例えば、NTSC信号等)を用いて処理を行うようにすることもできる。 In this way, the camera device is sequentially switched to capture and record the image of the object, so that the blind spot of the camera device does not occur, and the image data of a plurality of objects can be recorded simultaneously by using the network camera. It is possible to display a list of processes of manufacturing the object. In this embodiment, the case where a network camera is used has been described. However, it is also possible to perform processing using an analog video signal (for example, an NTSC signal).
図11は、アナログ信号をVTRに記録する場合の本発明の更に他の一実施例の概略構成を示すブロック図である。図11において、1101は、マトリックススイッチ(SW)、1102−1、1102−2、・・・1102−8は、VTRを示す(VTRを総称する場合は、VTR1102と称する。)。なお、図1と同じものには同じ符号が付されている。また、本実施例では、カメラ装置103およびVTR1102は、それぞれ8台設置されている場合(N=8の場合)を示しているが、これに限られるものでないことは言うまでもない。図12は、VTR1102の記録内容を示すもので、例えば、VTR1102−1、1102−2の記録内容を示している。以下動作を説明する。
FIG. 11 is a block diagram showing a schematic configuration of still another embodiment of the present invention when an analog signal is recorded in a VTR. In FIG. 11,
カメラ装置103は、生産ライン上を移動する、例えば、組立て部品102を順次撮像する。撮像された映像は、マトリックススイッチ1101で適宜切替えられ、VTR1102に記録される。なお、マトリックススイッチ1101は、複数のカメラ装置103のそれぞれから送られてくる撮像映像を指定された複数のVTR1102のいずれのVTR1102に記録するかを選択するスイッチ回路であり、このスイッチ回路は、制御部(図示せず。)により制御されている。
The
ここで、一つの撮像、記録方法について説明する。まず、組立て部品102−1がカメラ装置103−1の撮像視野範囲に入ると、カメラ装置103−1は、組立て部品102−1の撮像を開始し、その撮像映像が、マトリックスSW1101を介してVTR1102−1に記録される。続いて、組立て部品102−1がカメラ装置103−2の撮像視野範囲に入ると、カメラ装置103−2は、組立て部品102−1の撮像を開始し、その撮像映像は、マトリックスSW1101で切替えられ、VTR1102−1に記録される。このように組立て部品102−1は、生産ライン上を移動し、各工程A、B、・・・Hを通過する毎に順次カメラ装置103−3、103−4、・・・103−8で撮像され、マトリックスSW1101で切替えられ、組立て部品102−1の製造過程がVTR1102−1に一連の画像データとして記録される。即ち、図12のVTR1102−1の記録内容の組立て部品102−1に示されるようにカメラ1、カメラ2、・・・カメラ8の一連の画像データとして記録される。
Here, one imaging and recording method will be described. First, when the assembly component 102-1 enters the imaging field of view of the camera device 103-1, the camera device 103-1 starts imaging of the assembly component 102-1, and the captured image is transmitted to the VTR 1102 via the matrix SW1101. Recorded as -1. Subsequently, when the assembly component 102-1 enters the imaging field of view of the camera device 103-2, the camera device 103-2 starts imaging of the assembly component 102-1, and the captured image is switched by the matrix SW1101. , Recorded in the VTR 1102-1. In this way, the assembly part 102-1 moves on the production line, and sequentially passes through each process A, B,... H, by the camera devices 103-3, 103-4,. Images are picked up and switched by the
同様に、組立て部品102−2がカメラ装置103−1の撮像視野範囲に入ると、カメラ装置103−1は、組立て部品102−2の撮像を開始し、その撮像映像が、マトリックスSW1101でVTR1102−2に記録される。続いて、組立て部品102−2がカメラ装置103−2の撮像視野範囲に入ると、カメラ装置103−2は、組立て部品102−2の撮像を開始し、その撮像映像は、マトリックスSW1101で切替えられ、VTR102−2に記録される。このように組立て部品102−2は、生産ライン上を移動し、各工程を通過する毎に順次カメラ装置103−3、103−4、・・・103−8で撮像され、マトリックスSW1101で切替えられ、組立て部品102−2の製造過程がVTR1102−2に一連の画像データとして記録される。即ち、図12のVTR1102−2の記録内容の組立て部品102−2に示されるようにカメラ1、カメラ2、・・・カメラ8の一連の画像データとして記録される。なお、各工程、例えば、工程Aから工程Hの8つの工程に組立て部品102が位置する場合でも各工程に位置する組立て部品102−1、102−2、・・・102−8の撮像映像は、8台のVTR1102にそれぞれ記録することができる。
Similarly, when the assembly component 102-2 enters the imaging field of view of the camera device 103-1, the camera device 103-1 starts imaging the assembly component 102-2, and the captured image is displayed in the
次に、組立て部品102−9(9番目の組立て部品を示す。)がカメラ装置103−1の撮像視野範囲に入ると、カメラ装置103−1は、組立て部品102−9の撮像を開始し、その撮像映像が、マトリックスSW1101でVTR1102−1に記録される。なお、この場合は、組立て部品102−9の撮像映像は、組立て部品102−1の撮像映像の次に引続いて記録される。以後同様である。即ち、図12のVTR1102−1の記録内容の組立て部品102−9に示すカメラ1、カメラ2、・・・カメラ8と言うように記録される。 Next, when the assembly component 102-9 (showing the ninth assembly component) enters the imaging field of view of the camera device 103-1, the camera device 103-1 starts imaging the assembly component 102-9, The captured image is recorded in the VTR 1102-1 by the matrix SW1101. In this case, the captured image of the assembly component 102-9 is recorded following the captured image of the assembly component 102-1. The same applies thereafter. That is, the recording contents of the recorded contents of the VTR 1102-1 in FIG.
このように図11で示す実施例では、1つの組立て部品についての撮像映像は、生産ライン101上を移動する組立て部品を追いかけるようにマトリックスSW1101は、カメラ装置103とVTR1102を切替える。従って、VTR1102には、編集作業を行わずに自動的に1つの組立て部品について、一連の工程での組立ての様子が連続した画像として記録することができるという特徴がある。また、カメラ装置103で撮像される画像は膨大な量となるが、VTRのような記録装置では、安価な大容量のテーブ媒体に記録できるので、このような用途には極めて経済的で好都合である。なお、VTRの代わりに他のHDD、DVDあるいは光ディスクのような記録装置で構成することもできる。
Thus, in the embodiment shown in FIG. 11, the
以上、本発明について詳細に説明したが、本発明は、ここに記載された画像記録システムおよび記録画像の表示方法の実施例に限定されるものではなく、上記以外の画像記録システムおよび記録画像の表示方法に広く適応することが出来ることは、言うまでも無い。 Although the present invention has been described in detail above, the present invention is not limited to the embodiments of the image recording system and the recorded image display method described herein, and other image recording systems and recorded images than those described above. Needless to say, it can be widely applied to display methods.
101:生産ライン、102、902:組立て部品、103、706:カメラ装置、104:Webエンコーダ、106、704:センサ、107:伝送路、108:記録装置、109:表示板、110:ハンドリング装置、201:CPU、202:記録部、203:メモリ部、204:I/F部、205:圧縮/伸張部、206:データ管理部、207:入出力部、208:操作部、209:バス、701:ベルトコンベア、702:組立て用カメラ部品、703:移動方向、705:トリガー発生器、707:画像処理装置、708:モニタ、709:画像、901:表示画面、1101:マトリックスSW、1102:VTR。
101: Production line, 102, 902: Assembly parts, 103, 706: Camera device, 104: Web encoder, 106, 704: Sensor, 107: Transmission path, 108: Recording device, 109: Display board, 110: Handling device, 201: CPU, 202: recording unit, 203: memory unit, 204: I / F unit, 205: compression / decompression unit, 206: data management unit, 207: input / output unit, 208: operation unit, 209: bus, 701 : Belt conveyor, 702: camera parts for assembly, 703: moving direction, 705: trigger generator, 707: image processing device, 708: monitor, 709: image, 901: display screen, 1101: matrix SW, 1102: VTR.
Claims (3)
A plurality of camera devices that sequentially image a plurality of objects that move as appropriate, a detection unit that detects a time point when the object enters the field of view of each of the plurality of camera devices, and images captured by the plurality of camera devices An image recording system having a recording device for recording an image together with information for distinguishing the object, searching image data recorded in the recording device based on the object distinction information, A method for displaying a recorded image, comprising: reading the image data from the recording device, and displaying the image of the predetermined object on the display unit in accordance with the moving order of the predetermined object.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004367189A JP2006172350A (en) | 2004-12-20 | 2004-12-20 | Image recording system and recorded image displaying method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004367189A JP2006172350A (en) | 2004-12-20 | 2004-12-20 | Image recording system and recorded image displaying method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2006172350A true JP2006172350A (en) | 2006-06-29 |
Family
ID=36673011
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004367189A Pending JP2006172350A (en) | 2004-12-20 | 2004-12-20 | Image recording system and recorded image displaying method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2006172350A (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008199195A (en) * | 2007-02-09 | 2008-08-28 | Fujifilm Corp | Camera device and its control method |
WO2017017733A1 (en) * | 2015-07-24 | 2017-02-02 | 富士通株式会社 | Manufacturing process management system, manufacturing process management method, and manufacturing process management program |
WO2017056263A1 (en) * | 2015-09-30 | 2017-04-06 | 富士通株式会社 | Manufacturing state display system, manufacturing state display method, and manufacturing state display program |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06106464A (en) * | 1992-09-24 | 1994-04-19 | Sanyo Electric Co Ltd | Production control system |
JP2002335453A (en) * | 2001-05-08 | 2002-11-22 | Hitachi Kokusai Electric Inc | Solid-state imaging apparatus |
JP2003150230A (en) * | 2001-11-14 | 2003-05-23 | Sharp Corp | Operation picture management system and method |
-
2004
- 2004-12-20 JP JP2004367189A patent/JP2006172350A/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06106464A (en) * | 1992-09-24 | 1994-04-19 | Sanyo Electric Co Ltd | Production control system |
JP2002335453A (en) * | 2001-05-08 | 2002-11-22 | Hitachi Kokusai Electric Inc | Solid-state imaging apparatus |
JP2003150230A (en) * | 2001-11-14 | 2003-05-23 | Sharp Corp | Operation picture management system and method |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008199195A (en) * | 2007-02-09 | 2008-08-28 | Fujifilm Corp | Camera device and its control method |
WO2017017733A1 (en) * | 2015-07-24 | 2017-02-02 | 富士通株式会社 | Manufacturing process management system, manufacturing process management method, and manufacturing process management program |
US10540626B2 (en) | 2015-07-24 | 2020-01-21 | Fujitsu Limited | Manufacturing process management system, manufacturing process management method, and non-transitory computer-readable recording medium recording manufacturing process management program |
WO2017056263A1 (en) * | 2015-09-30 | 2017-04-06 | 富士通株式会社 | Manufacturing state display system, manufacturing state display method, and manufacturing state display program |
JPWO2017056263A1 (en) * | 2015-09-30 | 2018-07-19 | 富士通株式会社 | Manufacturing status display system, manufacturing status display method, and manufacturing status display program |
US10791297B2 (en) | 2015-09-30 | 2020-09-29 | Fujitsu Limited | Manufacturing-state display system, manufacturing-state display method, and computer-readable recording medium |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10846529B2 (en) | Image monitoring system and image monitoring program | |
JP4363421B2 (en) | Monitoring system, monitoring system server and monitoring method | |
US20060119714A1 (en) | Data processor and data processing method | |
US8174571B2 (en) | Apparatus for processing images, apparatus for processing reproduced images, method of processing images, and method of processing reproduced images | |
US20070070199A1 (en) | Method and apparatus for automatically adjusting monitoring frames based on image variation | |
JP2006081125A (en) | Imaging system and imaging method | |
JPH11284987A (en) | Image supervisory system | |
JP2008042695A (en) | Monitor camera apparatus, monitor camera system, and method of recording monitor camera image | |
JP2004120178A (en) | Video image recording apparatus | |
JP2009296207A (en) | Monitored video recording system, and monitored video reproducing and displaying method | |
JP2006172350A (en) | Image recording system and recorded image displaying method | |
JP2006197223A (en) | Image monitoring system and image monitoring method | |
TWI699638B (en) | Data collection and reproduction system | |
TW201143381A (en) | Digital camera with upload function | |
KR101657522B1 (en) | Network camera and method for operating recorder thereof | |
CN100359921C (en) | Imaging apparatus, imaging method, imaging system, program | |
EP2541356B1 (en) | Processing monitoring data in a monitoring system | |
JP2001186530A (en) | Multiple channel image compressor and method therefor | |
JP2004241834A (en) | Moving picture generating apparatus and method, moving picture transmission system, program, and recording medium | |
JP2004172929A (en) | Recording device and computer program for recording method, and monitoring system | |
JP3665625B2 (en) | Image monitoring device | |
JP3507806B2 (en) | Object recording device | |
JPH10276359A (en) | Tracking device and tracking method | |
JP2004200809A (en) | Indoor remote supervisory system | |
JP3979729B2 (en) | Video recording apparatus and video recording method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20071204 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20100331 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100616 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100622 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100804 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20101207 |