JP2006172350A - Image recording system and recorded image displaying method - Google Patents

Image recording system and recorded image displaying method Download PDF

Info

Publication number
JP2006172350A
JP2006172350A JP2004367189A JP2004367189A JP2006172350A JP 2006172350 A JP2006172350 A JP 2006172350A JP 2004367189 A JP2004367189 A JP 2004367189A JP 2004367189 A JP2004367189 A JP 2004367189A JP 2006172350 A JP2006172350 A JP 2006172350A
Authority
JP
Japan
Prior art keywords
image
camera
recording
recorded
camera devices
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004367189A
Other languages
Japanese (ja)
Inventor
Masanori Sumiyoshi
正紀 住吉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Kokusai Electric Inc
Original Assignee
Hitachi Kokusai Electric Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Kokusai Electric Inc filed Critical Hitachi Kokusai Electric Inc
Priority to JP2004367189A priority Critical patent/JP2006172350A/en
Publication of JP2006172350A publication Critical patent/JP2006172350A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image recording system and recorded image displaying method capable of easily grasping a moving object assembling or manufacturing process. <P>SOLUTION: The system comprises a plurality of camera units for sequentially imaging an object moving as needed, detecting means for detecting at least the time when the object is carried in respective view ranges of the camera units, and a recording device for recording images imaged by a plurality of the camera units. As the object moves, a plurality of the detecting means generate trigger signals sequentially, and the images imaged by a plurality of the camera units based on the sequentially generated trigger signals are sequentially recorded on the recording device. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、画像記録システムおよび記録画像の表示方法に関し、特に、生産ライン等の移動物体を連続して撮像する画像記録システムおよび記録画像の表示方法に関するものである。   The present invention relates to an image recording system and a recorded image display method, and more particularly to an image recording system and a recorded image display method for continuously capturing moving objects such as production lines.

従来、生産ライン上の移動物体、例えば、カメラや無線機等の製品が製品組立てライン上を移動する場合、その移動する製品を監視用カメラで撮像し、モニタ上に表示したり、また、その画像を記録装置に記録し、不良製品の早期発見や歩留まりの向上のための生産管理に利用される画像記録システムが知られている。従来のこの種の画像記録システム、例えば、固体撮像装置(例えば、特許文献1参照)について、図7を用いて説明する。図7において、ベルトコンベア701に組立て用カメラ部品702a、702b、702c、702d、・・・(なお、カメラ部品を総称する場合は、カメラ部品702と称する。)が一定の間隔で乗せられており、ベルトコンベア701が矢印703で示す方向に移動している。ベルトコンベア701上のカメラ部品702も矢印703の示す方向に移動する。704aおよび704bは、センサを示している。このセンサは、例えば、704aは、LED等の発光素子、704bは、発光素子704aからの光を受光する受光素子(フォトセンサ)であり、ベルトコンベア701にカメラ部品702が供給される位置に設置されている。   Conventionally, when a moving object on a production line, for example, a product such as a camera or a radio device moves on a product assembly line, the moving product is imaged with a monitoring camera and displayed on a monitor. There is known an image recording system that records an image on a recording device and is used for production management for early detection of defective products and improvement of yield. A conventional image recording system of this type, for example, a solid-state imaging device (see, for example, Patent Document 1) will be described with reference to FIG. In FIG. 7, the assembly camera parts 702a, 702b, 702c, 702d,... (Where camera parts are collectively referred to as camera parts 702) are placed on the belt conveyor 701 at regular intervals. The belt conveyor 701 is moving in the direction indicated by the arrow 703. The camera component 702 on the belt conveyor 701 also moves in the direction indicated by the arrow 703. Reference numerals 704a and 704b denote sensors. For example, 704a is a light emitting element such as an LED, 704b is a light receiving element (photosensor) that receives light from the light emitting element 704a, and is installed at a position where the camera component 702 is supplied to the belt conveyor 701. Has been.

センサ704は、供給されるカメラ部品702を次々と感知し、感知する度にカメラ部品702が通過したことを示す信号をトリガー発生器705に次々と出力する。トリガー発生器705は、感知したことを示す信号によってトリガーパルスを生成し、カメラ装置706に出力する。カメラ装置706は、入力されたトリガーパルスに基づいて予め定められたタイミングで、割り当てられた撮像視野範囲を撮像し、撮像した画像を画像処理装置707に出力する。なお、予め定められたタイミングは、例えば、センサ704がカメラ部品702を感知してからカメラ装置706の撮像視野に入る時間ST1を予め設定されている。   The sensor 704 sequentially senses the supplied camera component 702 and outputs a signal indicating that the camera component 702 has passed each time to the trigger generator 705 each time it is sensed. The trigger generator 705 generates a trigger pulse according to a signal indicating that it has been sensed, and outputs the trigger pulse to the camera device 706. The camera device 706 images the allocated imaging field range at a predetermined timing based on the input trigger pulse, and outputs the captured image to the image processing device 707. Note that the predetermined timing is set in advance, for example, a time ST1 for entering the imaging field of view of the camera device 706 after the sensor 704 senses the camera component 702.

画像処理装置707は、入力された画像を、その撮像システムに適応した画像信号のフォーマットに変換してモニタ708に出力する。モニタ708は、入力された画像信号から画像を再生して表示する。また、モニタ708には、カメラ装置706で撮像された画像をリアルタイムで表示することもできるが、例えば、画像処理装置707で適宜表示間隔を調整し、カメラ部品702aの像709aとカメラ部品702bの像709bを同一のモニタ画面に表示することもできる。この場合のカメラ部品702aの像709aとカメラ部品702bの像709bとの間隔ST2は、ST1より短く設定されている。   The image processing device 707 converts the input image into an image signal format suitable for the imaging system, and outputs the image signal to the monitor 708. The monitor 708 reproduces and displays an image from the input image signal. The monitor 708 can also display an image captured by the camera device 706 in real time. For example, the display interval is appropriately adjusted by the image processing device 707 so that the image 709a of the camera component 702a and the camera component 702b are displayed. The image 709b can also be displayed on the same monitor screen. In this case, the interval ST2 between the image 709a of the camera component 702a and the image 709b of the camera component 702b is set shorter than ST1.

而して、上述したような工場の生産ライン等で例えば、組立ての部品を撮影する場合、生産ラインは、非常に長く、最初に組立て部品702が供給される場合にはカメラ装置706で撮像ができるが、組立ての部品702がベルトコンベア701の移動で移動すると、固定されているカメラ装置706では、その後の例えば、組立ての様子を撮像できない。この問題を解決するために、例えば、雲台機能を備えたカメラ装置を使用して、組立ての部品702を追いかけて撮影するか、あるいは、複数台のカメラを用意し、各々の映像を個別に記録する方法が用いられていた。   Thus, for example, when photographing a part to be assembled on the production line of the factory as described above, the production line is very long. When the assembly part 702 is supplied for the first time, imaging is performed by the camera device 706. However, when the assembly component 702 is moved by the movement of the belt conveyor 701, the fixed camera device 706 cannot capture an image of the subsequent assembly, for example. In order to solve this problem, for example, a camera device having a pan head function is used to follow the assembly component 702 for shooting, or a plurality of cameras are prepared, and each image is individually recorded. A method of recording was used.

しかしながらこのような従来の方法では、カメラ装置の方向が移動するため、写らない範囲(死角)が生じたり、また、多数の部品を同時に撮像するには、かなり無理が生じるという問題がある。また、一連の組立て部品の組立工程を見る場合には、個々に録画した画像を、その都度、別々に探し出して表示させる必要があり、工程管理の面からもできるだけ短時間にスムーズに一連の組立て工程が分かる画像の表示方法が望まれている。   However, in such a conventional method, since the direction of the camera device moves, there is a problem that a non-imageable range (dead angle) is generated, and that it is extremely difficult to image many parts simultaneously. In addition, when viewing the assembly process of a series of assembled parts, it is necessary to search and display the individually recorded images separately each time. There is a demand for a method of displaying an image that shows the process.

特開2002−335453号公報JP 2002-335453 A

以上説明したように従来の方法では、カメラ装置の方向が移動するため、写らない範囲が生じたり、また、多数の部品を同時に撮像するには、かなり無理が生じる。また、一連の組立て部品の組立工程を見る場合には、個々に録画した画像を、その都度探し出して表示させる必要があり、工程管理の面からもできるだけ短時間に一連の組立て工程が分かる画像の表示方法が望まれている。   As described above, in the conventional method, since the direction of the camera device moves, a range that does not appear is generated, and it is extremely difficult to capture a large number of parts simultaneously. In addition, when viewing the assembly process of a series of assembly parts, it is necessary to search and display each recorded image each time. From the viewpoint of process management, an image that shows a series of assembly processes in as short a time as possible. A display method is desired.

本発明の目的は、移動物体の組立てや製造の過程が容易に把握できる画像記録システムおよび記録画像の表示方法を提供することである。   SUMMARY OF THE INVENTION An object of the present invention is to provide an image recording system and a recorded image display method capable of easily grasping the process of assembling and manufacturing a moving object.

本発明の他の目的は、移動物体の組立てや製造の管理データを蓄積できる画像記録システムを提供することである。   Another object of the present invention is to provide an image recording system capable of accumulating management data for assembling and manufacturing moving objects.

本発明の更に他の目的は、蓄積された移動物体の組立てや製造の管理データを容易に表示できる記録画像の表示方法を提供することである。   Still another object of the present invention is to provide a recorded image display method capable of easily displaying management data of assembly and manufacturing of accumulated moving objects.

本発明の画像記録システムは、適宜移動する対象物を順次撮像する複数のカメラ装置と、少なくとも上記複数のカメラ装置のそれぞれの視野範囲に上記対象物が搬入される時点を検出する検出手段と、上記複数のカメラ装置で撮像された画像を記録する記録装置とを有し、上記対象物が移動するに従って、複数の上記検出手段が順次トリガ信号を発生し、順次発生する上記トリガ信号に基づいて複数の上記カメラ装置で撮像された画像を順次上記記録装置に記録するように構成される。   The image recording system of the present invention includes a plurality of camera devices that sequentially capture an object that moves as appropriate, and a detection unit that detects a time point at which the object is carried into at least the field of view of each of the plurality of camera devices. A recording device for recording images picked up by the plurality of camera devices, and the plurality of detecting means sequentially generate trigger signals as the object moves, and based on the trigger signals generated sequentially Images captured by the plurality of camera devices are sequentially recorded in the recording device.

また、本発明の画像記録システムにおいて、上記移動する対象物が、所定の間隔に位置された複数の対象物であり、複数の上記検出手段は、それぞれの上記対象物がそれぞれの上記カメラ装置の視野範囲に入る時点を検出し、それぞれの上記カメラ装置がそれぞれの対象物を撮像すると共に、複数の上記検出手段からのトリガ信号に基づいて複数の上記カメラ装置で撮像された画像を上記対象物を区別する情報と共に順次上記記録装置に記録するように構成される。   Further, in the image recording system of the present invention, the moving object is a plurality of objects positioned at a predetermined interval, and the plurality of detection means are configured such that each of the objects corresponds to each of the camera devices. A point in time when the camera enters the field of view is detected, and each of the camera devices captures an image of each object, and images captured by the plurality of camera devices based on trigger signals from the plurality of detection means are captured by the object. Are sequentially recorded on the recording device together with the information for distinguishing them.

また、本発明の画像記録システムにおいて、上記複数のカメラ装置と、複数の上記検出手段は、生産ラインに沿った生産工程毎に配置されている。   In the image recording system of the present invention, the plurality of camera devices and the plurality of detection means are arranged for each production process along the production line.

また、本発明の画像記録システムにおいて、更に、上記生産工程を表示する表示手段を上記生産工程の位置に配置し、上記生産工程を視野範囲に持つ上記カメラ装置により上記対象物と共に上記表示手段を撮像するように構成される。   Further, in the image recording system of the present invention, a display means for displaying the production process is further arranged at the position of the production process, and the display means is displayed together with the object by the camera device having the production process in a visual field range. Configured to image.

また、本発明の画像記録システムにおいて、上記記録装置は、上記カメラ装置で撮像された画像と、少なくとも上記カメラ装置のID番号および撮像日時に関する情報を一緒に記録するように構成される。   In the image recording system of the present invention, the recording device is configured to record an image captured by the camera device together with at least information related to the ID number and imaging date / time of the camera device.

更に、本発明は、適宜移動する複数の対象物を順次撮像する複数のカメラ装置と、上記複数のカメラ装置のそれぞれの視野範囲に上記対象物が入る時点を検出する検出手段と、上記複数のカメラ装置で撮像された画像を上記対象物を区別する情報と共に記録する記録装置とを有する画像記録システムであって、上記記録装置に記録された画像データを対象物を区別する情報に基づいて検索し、上記対象物の所定の画像データを上記記録装置から読出し、表示部に所定対象物の上記移動順序に従って上記所定対象物の画像を表示するように構成される。   Furthermore, the present invention provides a plurality of camera devices that sequentially image a plurality of objects that move as appropriate, a detection unit that detects a time point when the objects enter the respective visual field ranges of the plurality of camera devices, An image recording system having a recording device that records an image captured by a camera device together with information for distinguishing the object, and searches image data recorded in the recording device based on the information for distinguishing the object Then, the predetermined image data of the object is read from the recording device, and the image of the object is displayed on the display unit in accordance with the moving order of the object.

以上説明したように、本発明によれば、ベルトコンベアで移動する移動物体の組立てや製造の過程を記録でき、また、多数の部品を同時に撮像することが可能であるため、不良品のチェックは勿論のこと、どの製造工程で不良が発生したか、また、発生原因を特定することが容易となる。また、製品の工程管理、品質管理等の管理データを蓄積できることは勿論のこと、管理データを簡単に検索し、表示できる画像記録システムおよび記録画像の表示方法を実現できる。   As described above, according to the present invention, the process of assembling and manufacturing a moving object moving on a belt conveyor can be recorded, and a large number of parts can be imaged simultaneously. Of course, it becomes easy to specify in which manufacturing process the defect has occurred and the cause of the occurrence. In addition, management data such as product process management and quality control can be stored, as well as an image recording system and a recorded image display method capable of easily searching and displaying management data.

以下、本発明に係る画像記録システムおよび記録画像の表示方法を図面に示した発明の実施の形態を参照して詳細に説明する。図1は、本発明の一実施例の概略構成を説明するための図で、例えば、工場の生産ラインを示している。101は、生産する対象物を矢印方向(移動方向)に搬送するベルトコンベア(生産ライン)である。102−1、102−2、102−3、・・・は、ほぼ一定の間隔で移動しながら例えば組立てられる部品を示している。なお、部品を総称する場合は、部品102と称する。103−1、103−2、103−3、・・・103−Nは、移動する部品102を撮像するカメラ装置で、生産ライン101に沿ってN台配列されている。なお、カメラ装置を総称する場合は、カメラ装置103と称する。各カメラ装置103は、生産ラインの各工程A、B、C、・・・N毎に配置され、また、各カメラ装置の撮像視野範囲で各工程を移動する部品102を撮像できるように設定されている。通常、この視野範囲は、例えば、60度程度に設定されており、1台のカメラ装置の視野範囲には、1個の部品102が搬送される。なお、部品102が互いに区別できるような表示がなされている場合等では、2個以上の部品が同じ視野範囲に入っても区別できるので問題はない。但し、以下の実施例では、1台のカメラ装置が1個の製品を撮像する場合を例に上げて説明するものとする。   Hereinafter, an image recording system and a method for displaying a recorded image according to the present invention will be described in detail with reference to embodiments of the invention shown in the drawings. FIG. 1 is a diagram for explaining a schematic configuration of an embodiment of the present invention, and shows, for example, a production line of a factory. Reference numeral 101 denotes a belt conveyor (production line) that conveys an object to be produced in the arrow direction (moving direction). 102-1, 102-2, 102-3,... Indicate parts that are assembled, for example, while moving at a substantially constant interval. In addition, when naming a component generically, it will be called the component 102. Reference numerals 103-1, 103-2, 103-3,... 103 -N are camera devices that image the moving component 102, and N units are arranged along the production line 101. In addition, when generically referring to a camera device, it is referred to as a camera device 103. Each camera device 103 is arranged for each process A, B, C,... N of the production line, and is set so as to image the component 102 that moves in each process within the imaging field of view of each camera device. ing. Usually, this visual field range is set to about 60 degrees, for example, and one component 102 is conveyed to the visual field range of one camera device. In the case where the display is made such that the parts 102 can be distinguished from each other, there is no problem because two or more parts can be distinguished even if they are in the same visual field range. However, in the following embodiments, a case where one camera device images one product will be described as an example.

104−1、104−2、104−3、・・・104−Nは、Webエンコーダで、各カメラ装置で撮像された画像を適宜符号化し、伝送路107に送出する。なお、Webエンコーダを総称する場合は、Webエンコーダ104と称する。Webエンコーダ104は、必要に応じて画像データをJPEG(Joint Photographic Experts Group)あるいはMPEG―2(Moving Picture Experts Group -2)やMPEG―4の技術を用いて圧縮し、伝送路に送出することもできる。また、Webエンコーダ104は、各カメラ装置103と一体に構成することも可能である。106は、それぞれ複数のセンサを示す。各センサ106は、例えば、LED等の発光素子106−1a、106−2a、・・・106−Naと受光素子106−1b、106−2b、・・・106−Nbがそれぞれ対をなし、例えば、発光素子106−1aからの光を受光素子(フォトセンサ)106−1bが受光するように構成されている。このセンサ106は、例えば、各カメラ装置103の撮像範囲に部品102が移動する入口付近に配置され、部品102がカメラ装置103の視野範囲に入ると部品102を検知し、検知信号(トリガ信号)がセンサからWebエンコーダに入力される。なお、センサ106は、各カメラ装置103の撮像範囲の入口と出口に設けることもできるが、次のカメラ装置103の出口側のセンサは、次のカメラ装置の撮像範囲の入り口側のセンサを兼ねることもできる。108は、記録装置を示し、各カメラ装置103で撮像された画像がWebエンコーダ104、伝送路、例えば、LAN(Local Area Network)107を介して記録装置108に伝送され、記録される。   104-1, 104-1, 104 -N are Web encoders that appropriately encode images captured by the camera devices and send them to the transmission path 107. Note that the Web encoder is collectively referred to as the Web encoder 104. The Web encoder 104 may compress the image data using JPEG (Joint Photographic Experts Group), MPEG-2 (Moving Picture Experts Group-2), or MPEG-4 technology as needed, and send it to the transmission line. it can. The Web encoder 104 can also be configured integrally with each camera device 103. Reference numeral 106 denotes a plurality of sensors. Each sensor 106 has a pair of light emitting elements 106-1a, 106-2a,... 106-Na and light receiving elements 106-1b, 106-2b,. The light receiving element (photosensor) 106-1b receives the light from the light emitting element 106-1a. The sensor 106 is disposed, for example, in the vicinity of the entrance where the component 102 moves into the imaging range of each camera device 103. When the component 102 enters the visual field range of the camera device 103, the sensor 106 is detected and a detection signal (trigger signal) is detected. Is input from the sensor to the Web encoder. The sensor 106 may be provided at the entrance and exit of the imaging range of each camera device 103, but the sensor on the exit side of the next camera device 103 also serves as the sensor on the entrance side of the imaging range of the next camera device. You can also. Reference numeral 108 denotes a recording device, and an image captured by each camera device 103 is transmitted to the recording device 108 via the Web encoder 104 and a transmission path, for example, a LAN (Local Area Network) 107, and recorded.

次に、記録装置108の具体的な構成について、図2を用いて説明する。図2は、本発明で用いられる記録装置108の概略構成を示すブロック図である。図2において、201は、CPU(中央処理装置)であり、記録装置108の動作を制御する。202は、記録部であり、各カメラ装置103で撮像された画像を記録する。この記録部202は、半導体メモリ、HDD(ハードデイスク)、磁気テープ、DVD(Digital Versatile Disc)あるいは光磁気デイスクを使用することができる。203は、メモリ部であり、画像記録装置108のプログラムが実行可能な状態で格納され、画像記録装置が駆動されると、逐次このプログラムが読み出されて実行される。また、メモリ部203は、カメラ装置からの画像データや記録部202から読み出された画像データが一時的に記録されるワークメモリ(Work Memory)としての機能も有する。   Next, a specific configuration of the recording apparatus 108 will be described with reference to FIG. FIG. 2 is a block diagram showing a schematic configuration of the recording apparatus 108 used in the present invention. In FIG. 2, 201 is a CPU (Central Processing Unit) that controls the operation of the recording device 108. Reference numeral 202 denotes a recording unit that records an image captured by each camera device 103. The recording unit 202 can use a semiconductor memory, HDD (hard disk), magnetic tape, DVD (Digital Versatile Disc), or magneto-optical disk. A memory unit 203 is stored in a state where the program of the image recording apparatus 108 can be executed. When the image recording apparatus is driven, the program is sequentially read and executed. The memory unit 203 also has a function as a work memory in which image data from the camera device and image data read from the recording unit 202 are temporarily recorded.

204は、I/F部(インターフェース部)であり、伝送路107からの画像データを入力するためのインタフェースである。圧縮/伸張部205は、必要に応じて、取り込んだ画像データを圧縮したり、圧縮された画像データを伸張したりするモジュールである。例えば、Webエンコーダ104で既に画像圧縮された画像データを伸張して記録装置202に記録したり、あるいはWebエンコーダ104で画像圧縮されないで送られてきた画像データを例えば、JPEGで圧縮して記録部202に記録する等の動作をする。データ管理部206は、記録された画像データに関する各種データの管理が行われる。このデータ管理部206については後述する。   An I / F unit (interface unit) 204 is an interface for inputting image data from the transmission path 107. The compression / expansion unit 205 is a module that compresses the captured image data or expands the compressed image data as necessary. For example, the image data already compressed by the Web encoder 104 is decompressed and recorded in the recording device 202, or the image data sent without being compressed by the Web encoder 104 is compressed by, for example, JPEG and recorded. An operation such as recording in 202 is performed. The data management unit 206 manages various data related to the recorded image data. The data management unit 206 will be described later.

207は、入出力部で、カメラ装置103から取込まれた画像または記録部202に記録されている画像をモニターに表示したり、別の部署に伝送したり、あるいは別の部署からの画像を入力するためのものである。208は、操作部、例えば、キーボード、マウス等で構成され、ユーザが記録装置108の必要な操作をするためのものである。209は、バスラインで、CPU201と各装置を接続するためのものである。   An input / output unit 207 displays an image captured from the camera device 103 or an image recorded in the recording unit 202 on a monitor, transmits the image to another department, or displays an image from another department. It is for input. Reference numeral 208 denotes an operation unit, for example, a keyboard, a mouse, or the like, which is used by the user to perform necessary operations on the recording apparatus 108. Reference numeral 209 denotes a bus line for connecting the CPU 201 and each device.

次に、図1に示す本発明の画像記録システムの動作を図3を用いて説明する。まず、ステップ301では、例えば、組立て部品102−1が生産ライン101に投入され、ベルトコンベアで移動し、入口側センサ106−1が組立て部品102−1を検知すると、受光素子(フォトセンサ)106−1bがトリガパルスを発生する。このトリガパルスは、Webエンコーダ104−1に供給される。また、同時にこのトリガパルスは、記録装置108にも伝送される。   Next, the operation of the image recording system of the present invention shown in FIG. 1 will be described with reference to FIG. First, in step 301, for example, when the assembly component 102-1 is put into the production line 101 and moved by the belt conveyor, and the inlet side sensor 106-1 detects the assembly component 102-1, the light receiving element (photosensor) 106 is detected. -1b generates a trigger pulse. This trigger pulse is supplied to the Web encoder 104-1. At the same time, the trigger pulse is transmitted to the recording device 108.

ステップ302では、上記トリガパルスがWebエンコーダ104−1に供給されることで、カメラ装置103−1は、組立て部品102−1の撮像を開始する。カメラ装置103−1は、例えば、NTSC方式のCCD(Charge Coupled Device)撮像装置で構成され、30フレーム/秒で組立て部品102−1を撮影し、その画像をWebエンコーダ104−1に供給する。Webエンコーダ104−1では、供給された画像を符号化し、また、必要に応じて圧縮し、画像データを生成する。本発明の実施例では、NTSC方式の画像1フレームを500Kbitで伝送路107を介して記録装置108に送信したとすると、NTSC方式の画像30フレーム/秒では、15,000Kbpsの伝送速度で伝送されることとなる。   In step 302, the trigger pulse is supplied to the Web encoder 104-1, so that the camera apparatus 103-1 starts imaging of the assembly component 102-1. The camera device 103-1 is composed of, for example, an NTSC CCD (Charge Coupled Device) imaging device, photographs the assembly part 102-1 at 30 frames / second, and supplies the image to the Web encoder 104-1. The Web encoder 104-1 encodes the supplied image and compresses it as necessary to generate image data. In the embodiment of the present invention, if one NTSC image frame is transmitted to the recording device 108 via the transmission path 107 at 500 Kbit, the NTSC image 30 frames / second is transmitted at a transmission rate of 15,000 Kbps. The Rukoto.

ここで、画像データの伝送について説明する。図4(A)で示されるD11、D21、・・・Dn1は、Webエンコーダ104−1、104−2、・・・104−Nで作成された画像データを示す。この画像データD11、D21、・・・Dn1は、伝送路107を介して記録装置108に伝送される。しかしながら、これらの画像データを伝送する場合、例えば、伝送路107がイーサーネット(Ethernet)(登録商標)の場合、1度に伝送できるデータサイズであるMTU(Maximum Transmission Unit)のサイズは、所定の値に設定されているので、例えば、画像データD11を送るには、適宜D11−1、D11−2、・・D11−pに分割し、伝送される。図4(B)は、この分割した画像データを伝送するための伝送のフォーマットを示すもので、D11−1は、画像データD11の分割した画像データを示し、HTTP(Hyper Text Transfer Protocol)、TCP(Transmission Control Protocol)、IP(Internet Protocol)は、イーサーネットでデータを伝送する場合のヘッダ情報を付加している。なお、他の画像データD21、・・・Dn1についても同様である。   Here, transmission of image data will be described. Dn1 shown in FIG. 4A indicates image data created by the Web encoders 104-1, 104-2,... 104-N. The image data D11, D21,... Dn1 are transmitted to the recording device 108 via the transmission path 107. However, when transmitting these image data, for example, when the transmission path 107 is Ethernet (registered trademark), the size of an MTU (Maximum Transmission Unit), which is a data size that can be transmitted at one time, is a predetermined value. For example, in order to send the image data D11, it is divided into D11-1, D11-2,... D11-p and transmitted. FIG. 4B shows a transmission format for transmitting the divided image data. D11-1 shows the divided image data of the image data D11, and includes HTTP (Hyper Text Transfer Protocol), TCP. (Transmission Control Protocol) and IP (Internet Protocol) add header information when data is transmitted over Ethernet. The same applies to the other image data D21,... Dn1.

ステップ303は、ステップ301で発報されたトリガパルスを記録装置108が受信すると、記録装置108では、CPU201の制御が開始され、Webエンコーダ104−1からの画像データD11を受信し、記録部202に画像データD11を記録する。図4(C)は、記録部202の記録の状態を模式的に示したもので、記録部202の最初の番地11にWebエンコーダ104−1からの画像データD11が記録されることを示している。同様に2番目の番地12には、Webエンコーダ104−2からの画像データD12が記録されることを示している。ここで、mは、組立て部品102の個数に対応する。従って、画像データDmnは、組立て部品102−mをカメラ装置103−Nで撮像して得られる画像データであり、m、nは、記憶部202の番地(m、n)も表している。   In step 303, when the recording device 108 receives the trigger pulse issued in step 301, the recording device 108 starts the control of the CPU 201, receives the image data D 11 from the web encoder 104-1, and the recording unit 202. Image data D11. FIG. 4C schematically shows the recording state of the recording unit 202, and shows that the image data D11 from the Web encoder 104-1 is recorded at the first address 11 of the recording unit 202. Yes. Similarly, the second address 12 indicates that the image data D12 from the Web encoder 104-2 is recorded. Here, m corresponds to the number of assembly parts 102. Therefore, the image data Dmn is image data obtained by imaging the assembly component 102-m with the camera device 103-N, and m and n also represent the address (m, n) of the storage unit 202.

ステップ304は、生産ライン上の組立て部品102−1が更に移動して、出口側のセンサ106−2が組立て部品102−1を検知し、受光素子106−2bがトリガパルスを発生すると、このトリガパルスは、Webエンコーダ104−2を介して記録装置108に伝送され、ステップ305に進む。出口側のセンサの受光素子106−2bがトリガパルスを発生するまでの間は、記録装置108は、カメラ装置103−1の画像データの記録を継続する。   In step 304, when the assembly part 102-1 on the production line further moves, the sensor 106-2 on the outlet side detects the assembly part 102-1 and the light receiving element 106-2b generates a trigger pulse, this trigger is generated. The pulse is transmitted to the recording device 108 via the Web encoder 104-2, and the process proceeds to Step 305. Until the light receiving element 106-2b of the sensor on the exit side generates a trigger pulse, the recording device 108 continues recording image data of the camera device 103-1.

ステップ305では、受光素子106−2bからのトリガパルスに基づいて記録装置108は、Webエンコーダ104−1からの組立て部品102−1の画像データの記録を終了する。   In step 305, the recording apparatus 108 ends the recording of the image data of the assembly component 102-1 from the Web encoder 104-1 based on the trigger pulse from the light receiving element 106-2b.

ステップ306では、上記受光素子106−2bからのトリガパルスに基づいてカメラ装置103−1の撮像動作を終了する。   In step 306, the imaging operation of the camera device 103-1 is terminated based on the trigger pulse from the light receiving element 106-2b.

以上の動作が生産ライン101上を移動する組立て部品102−2、102−3・・・についても同様に行われる。なお、カメラ装置103は、上記実施例のように入口側センサで組立て部品102の撮影を開始し、出口側センサで撮影を終了することもできるが、カメラ装置は、動作をONした場合、撮像映像が安定するまでには、数秒程度かかるので、常に撮影状態とし、記録装置108の記録部に記録するタイミングをトリガパルスで制御する方が実用的である。また、伝送路107のデータ伝送容量は、一般的に100Mbps程度である。前述したNTSC方式の画像30フレーム/秒では、15,000Kbpsの伝送容量で伝送されるので、理論的には、100Mbpsの伝送路では、約6台のカメラ装置103からの画像データが記録装置108に記録できることとなる。従って、6台以上のカメラ装置103からの画像データを記録装置108に蓄積する場合や伝送路の伝送容量が少ない場合には、伝送する画像の枚数を少なくするか、画像の圧縮率を高くしたり、解像度を低くする等の対策が必要である。なお、このような生産ラインの組立て部品102を撮像する場合、常に、30フレーム/秒で撮像する必要もないので、カメラ装置103の撮像範囲内で、数枚の画像データを間欠的に伝送し、記録することで十分である。また、その方が画像データの伝送容量を少なくでき、伝送路107の利用効率を上げることができるので、多数のカメラ装置103を設置できると言う効果が期待できる。また、間欠的に数枚の画像データを伝送するには、例えば、記録装置108にカウンタを設け、2秒に1枚のフレームを要求するようにカウンタを設定することで実現できる。   The above operation is performed in the same manner for the assembly parts 102-2, 102-3,... Moving on the production line 101. Note that the camera device 103 can start imaging of the assembly part 102 with the entrance side sensor and end the imaging with the exit side sensor as in the above embodiment. However, when the camera device 103 is turned on, the imaging is performed. Since it takes several seconds for the video to stabilize, it is more practical to always set the shooting state and control the timing of recording in the recording unit of the recording device 108 with the trigger pulse. The data transmission capacity of the transmission path 107 is generally about 100 Mbps. The NTSC image 30 frames / second described above is transmitted at a transmission capacity of 15,000 Kbps. Therefore, theoretically, on the 100 Mbps transmission path, the image data from about six camera devices 103 is recorded in the recording device 108. Can be recorded. Therefore, when image data from six or more camera devices 103 is stored in the recording device 108 or when the transmission capacity of the transmission path is small, the number of images to be transmitted is reduced or the image compression rate is increased. Or measures such as lowering the resolution. In addition, when imaging the assembly part 102 of such a production line, since it is not always necessary to capture at 30 frames / second, several pieces of image data are intermittently transmitted within the imaging range of the camera device 103. It is enough to record. In addition, since the transmission capacity of the image data can be reduced and the utilization efficiency of the transmission path 107 can be increased, the effect that a large number of camera devices 103 can be installed can be expected. Further, intermittent transmission of several pieces of image data can be realized, for example, by providing a counter in the recording apparatus 108 and setting the counter so that one frame is requested every 2 seconds.

次に、カメラ装置103で撮像した画像の記録方法について図5を用いて説明する。組立て部品102−1が工程Aに差し掛かると、前述したようにセンサ106−1が感知し、Webエンコーダ104−1にトリガパルスが供給される。これによりカメラ装置103−1と記録装置108が駆動される。このトリガパルスにより記録装置108は、カメラ装置103−1の画像データを受信する。図5のD11は、カメラ装置103−1で、工程Aの期間に撮像された画像f11枚分のデータを示している。この組立て部品102−1は、更に、生産ライン101上を移動し、工程Aを終了し工程Bに搬送される。工程Bに入ると、センサ106−2が発報し、上述と同様にカメラ装置103−2が組立て部品102−1を撮像し、撮像された画像が記録装置108に伝送され、記録される。図5のD12は、カメラ装置103−2で、工程Bの期間に撮像された画像f12枚分のデータを示している。このように組立て部品102−1が生産ライン101の工程A、B、・・・Nを順次移動するに従ってカメラ装置103−1、103−2、・・・103−Nにより順次撮像されるので、記録装置108には、図5に示すようにD11、D12、・・・D1nの画像データとして記録される。なお、記録装置108の記録部202には、図4(B)に示されるように番地(1、1)(1、2)(1,3)・・・(1、n)にそれぞれD11、D12、・・・D1nとして記録される。   Next, a method for recording an image captured by the camera device 103 will be described with reference to FIG. When the assembly component 102-1 reaches the process A, the sensor 106-1 senses as described above, and a trigger pulse is supplied to the Web encoder 104-1. As a result, the camera device 103-1 and the recording device 108 are driven. The recording device 108 receives the image data of the camera device 103-1 by this trigger pulse. D11 in FIG. 5 indicates data for f11 images captured during the process A by the camera device 103-1. The assembly part 102-1 further moves on the production line 101, ends the process A, and is conveyed to the process B. When entering the process B, the sensor 106-2 issues a report, and the camera device 103-2 images the assembly component 102-1 in the same manner as described above, and the captured image is transmitted to the recording device 108 and recorded. D12 in FIG. 5 indicates data for f12 images captured during the process B by the camera apparatus 103-2. Since the assembly parts 102-1 are sequentially imaged by the camera devices 103-1, 103-2,... 103-N as the processes A, B,. As shown in FIG. 5, the recording device 108 records the image data as D11, D12,... D1n. In the recording unit 202 of the recording apparatus 108, as shown in FIG. 4B, the addresses (1, 1) (1, 2) (1, 3). Recorded as D12,... D1n.

而して、組立て部品102−1が生産ライン101の工程Aから工程Bに移動すると、新たな組立て部品102−2が工程Aに搬入され、前述と同様にセンサ106−1が発報し、Webエンコーダ104−1にトリガパルスが供給される。これによりカメラ装置103−1と記録装置108が駆動される。このトリガパルスにより記録装置108は、カメラ装置103−1で組立て部品102−2を撮像した画像データを受信する。図5のD21は、カメラ装置103−1で、工程Aの期間に組立て部品102−2を撮像した画像f21枚分のデータを示している。この組立て部品102−2は、更に、生産ライン101上を移動し、工程Aを終了し工程Bに搬送される。工程Bに入ると、センサ106−2が発報し、上述と同様にカメラ装置103−2が組立て部品102−2を撮像し、撮像された画像が記録装置108に伝送され、記録される。図5のD22は、カメラ装置103−2で、工程Bの期間に組立て部品102−2を撮像した画像f22枚分のデータを示している。このようにすると、生産ライン101上を搬送される全ての組立て部品102の各工程毎の画像が図5に示すように、m×n枚の画像データとして記録装置108の記録部202に記録される。その時の記録装置108の記録の状態を図4(B)で示す。   Thus, when the assembly part 102-1 moves from the process A to the process B of the production line 101, a new assembly part 102-2 is carried into the process A, and the sensor 106-1 reports as described above, A trigger pulse is supplied to the Web encoder 104-1. As a result, the camera device 103-1 and the recording device 108 are driven. With this trigger pulse, the recording device 108 receives image data obtained by imaging the assembly component 102-2 with the camera device 103-1. D21 in FIG. 5 indicates data for f21 images obtained by capturing the assembly component 102-2 in the period of the process A by the camera device 103-1. The assembly part 102-2 further moves on the production line 101, ends the process A, and is conveyed to the process B. When entering the process B, the sensor 106-2 issues a notification, and the camera device 103-2 images the assembly component 102-2 in the same manner as described above, and the captured image is transmitted to the recording device 108 and recorded. D22 of FIG. 5 has shown the data for 22 images f which imaged the assembly component 102-2 in the period of the process B with the camera apparatus 103-2. In this way, images for each process of all assembly parts 102 conveyed on the production line 101 are recorded in the recording unit 202 of the recording device 108 as m × n image data as shown in FIG. The FIG. 4B shows a recording state of the recording device 108 at that time.

次に、データ管理部206の動作について説明する。データ管理部206は、記録部202に記録されている画像データを適宜加工して製品の製造管理を行なうための管理データを出力したり、あるいはモニタに表示するためのものである。この一実施例について図6を用いて説明する。図6は、組立て部品102−1、102−2、・・・102−mの各組立ての過程の画像を表示したものである。このデータは、例えば、組立て部品102とカメラ装置103との関係を定めて記憶部202に記憶される時にアドレス(m、n)と対応づけて記憶している。従って、アドレス(1、n)のnが1からnの番地の画像データ(D11、D12、・・D1n)を記憶部202から読み出して表示すると、図6に示される組立て部品102−1が工程Aから搬入されて順次工程を移動し、最終工程Nで組立てを終了するまでの一連の組立ての経過が一覧表のように表示することができる。同様に組立て部品102−2、・・・102−mのそれぞれの一連の組立ての経過を一覧表のように表示することができる。   Next, the operation of the data management unit 206 will be described. The data management unit 206 is for appropriately processing the image data recorded in the recording unit 202 to output management data for performing product manufacturing management or to display it on a monitor. This embodiment will be described with reference to FIG. FIG. 6 displays images of the process of assembling each of the assembly parts 102-1, 102-2,... 102-m. This data is stored in association with the address (m, n) when the relationship between the assembly component 102 and the camera device 103 is determined and stored in the storage unit 202, for example. Therefore, when the image data (D11, D12,... D1n) of addresses (1, n) with addresses n from 1 to n is read from the storage unit 202 and displayed, the assembly part 102-1 shown in FIG. It is possible to display the progress of a series of assembling from A to the next process in which the process is sequentially moved and the assembly is completed in the final process N. Similarly, the progress of the assembly of each of the assembly parts 102-2,... 102-m can be displayed like a list.

このように生産ライン上を移動する組立て部品の組立ての様子を各組立て工程毎に表示することにより組立て工程における組立ての不良、例えば、部品搭載ミスや部品の変形、部品取付けの不具合、その他各種の不良を各工程毎に把握できるので、不良になった工程の発見およびその工程の改善が迅速に行うことができる。また、上記実施例では、部品の組立てラインの実施例で説明したが、部品の組立てラインに限定されるものではなく、各種の製造ライン等の生産の過程を記録することにより製品の管理や製造工程管理等の必要なもの全てに適応できることは言うまでもない。   By displaying the state of assembly parts moving on the production line in this way for each assembly process, assembly defects in the assembly process, for example, component mounting errors, part deformation, part mounting defects, and other various types Since the defect can be grasped for each process, the process that has become defective can be found and improved quickly. In the above embodiment, the parts assembly line has been described as an example. However, the present invention is not limited to the parts assembly line, and it is possible to manage and manufacture products by recording production processes of various production lines. It goes without saying that it can be applied to all necessary processes such as process control.

図8は、本発明の他の一実施例を説明するための概略構成図である。図8において109−1、109−2、・・・109−nは、表示板を示し、それぞれの表示板には、各工程の番号や記号が表示されている。例えば、工程Aには、Aの記号、工程Bには、Bの記号を表示した表示板がそれぞれカメラ装置103の撮像範囲の視野内に入る位置に設置されている。110−1、110−2、・・・は、組立て部品のハンドリング装置を示し、組立て部品に不良品が発見された場合、不良品を取除くハンドリング装置である。なお、図1と同じものには同じ符号が付されている。また、図8に示す画像記録システムの動作は、図1に示す画像記録システムと同じであるので詳細な動作説明は省略する。   FIG. 8 is a schematic configuration diagram for explaining another embodiment of the present invention. In FIG. 8, reference numerals 109-1, 109-2,... 109-n denote display plates, and the numbers and symbols of the respective steps are displayed on the respective display plates. For example, the display plate displaying the symbol A in process A and the symbol B in process B is installed at a position that falls within the field of view of the imaging range of the camera device 103. Reference numerals 110-1, 110-2,... Denote handling devices for assembly parts, and when a defective product is found in the assembly component, the handling device removes the defective product. In addition, the same code | symbol is attached | subjected to the same thing as FIG. The operation of the image recording system shown in FIG. 8 is the same as that of the image recording system shown in FIG.

而して、前述したように工程管理の目的のために組立て部品102の一連の組立ての様子を画像として表示することについて図6で説明した。しかしながら多数の画像データが一度に表示装置の表示部に表示される場合、どの画面がどの工程で撮像された画像かを判別するのは容易ではない。従って本発明では、図8で説明したように各カメラ装置103で、その視野内に設置された工程表示板109が組立て部品102の撮影と同時に撮影されるようになっている。図9(A)は、その再生画像を示している。即ち、再生画面901には、組立て部品102−1の画像と共に工程Aを示す表示板109−1が同時に表示される。従って、この表示画面901は、カメラ装置103−1で工程Aの範囲で撮像された画像であることが容易に理解される。また、図9(B)は、カメラ装置103−2で工程Bを撮像した場合の再生画像を表示したものである。この画像では、組立て部品102−1に組立て部品902が結合されたものが撮影され、合わせてB表示板109−2が表示されている。従って、工程Bでカメラ装置103−2で撮像されたことが容易に認識できる。このように込み立ての工程の特定が容易にできるという特徴がある。   Thus, as described above, displaying a series of assembling states of the assembly component 102 for the purpose of process management has been described with reference to FIG. However, when a large number of image data is displayed on the display unit of the display device at a time, it is not easy to determine which screen is an image captured in which process. Therefore, in the present invention, as described with reference to FIG. 8, the process display board 109 installed in the field of view of each camera device 103 is photographed simultaneously with photographing of the assembly part 102. FIG. 9A shows the reproduced image. In other words, the display screen 109-1 showing the process A is simultaneously displayed on the reproduction screen 901 together with the image of the assembly component 102-1. Therefore, it is easily understood that the display screen 901 is an image captured in the range of the process A by the camera device 103-1. FIG. 9B shows a reproduction image when the camera apparatus 103-2 images the process B. In this image, the assembly component 102-1 and the assembly component 902 are photographed, and the B display board 109-2 is displayed together. Therefore, it can be easily recognized that the image is captured by the camera apparatus 103-2 in the process B. In this way, it is possible to easily identify the complicated process.

更に、図9(A)、図9(B)の画面では、カメラIDや撮像日時が表示されている。一般に図1や図8に示す画像記録システムにおいて、複数のカメラ装置103は、それぞれ自分のカメラ装置のIDを設定しているのが普通である。このIDは、画像の付属データとして記憶装置に記憶している。従って、各カメラ装置で撮像した画像をモニタに表示する際には、表示される画像に記憶装置に記憶されているIDを重畳して表示するようになされている。例えば、図9(A)の画像は、カメラ装置103−1(カメラA)で撮像された画像であるので、カメラIDとして103−1(カメラ番号とIDを同じにした場合を示す。)が表示される。同様に図9(B)では、カメラID103−2(カメラB)が表示される。また、カメラ装置103あるいはWebエンコーダ104は、時計機能を有し、撮像画像には、付属情報として撮影日時を記憶装置に記憶しておき、各カメラ装置で撮像した画像をモニタに表示する際には、表示される画像に記憶装置に記憶されている撮影日時を重畳して表示するようになされている。例えば、図9(A)では、表示画面に20041112101103が表示されている。これは、この画像が2004年11月12日、10時11分03秒に撮影されたことを示すものである。更に、組立て部品に製品番号を表示すると、これが一緒に撮像されるので、部品を特定することが可能である。なお、上述した工程表示板109の画像、製品番号、撮像日時あるいは記録装置に記録されたアドレス情報等は、製品(対象物)を特定する情報であるので対象物の区別情報と称する。   Further, on the screens of FIGS. 9A and 9B, the camera ID and the imaging date and time are displayed. In general, in the image recording system shown in FIG. 1 or FIG. 8, it is normal for a plurality of camera devices 103 to set their own camera device IDs. This ID is stored in the storage device as data attached to the image. Therefore, when an image captured by each camera device is displayed on the monitor, the ID stored in the storage device is superimposed on the displayed image and displayed. For example, since the image in FIG. 9A is an image captured by the camera device 103-1 (camera A), the camera ID is 103-1 (showing the case where the camera number and the ID are the same). Is displayed. Similarly, in FIG. 9B, the camera ID 103-2 (camera B) is displayed. Further, the camera device 103 or the Web encoder 104 has a clock function, and in the captured image, the shooting date and time is stored in the storage device as attached information, and the image captured by each camera device is displayed on the monitor. Is configured to superimpose and display the shooting date and time stored in the storage device on the displayed image. For example, in FIG. 9A, 20041112101103 is displayed on the display screen. This indicates that this image was taken on November 12, 2004 at 10:11:03. Further, when the product number is displayed on the assembled part, it is imaged together so that the part can be specified. Note that the image, product number, imaging date and time information recorded on the recording device, etc. on the process display board 109 described above are information for identifying a product (object), and are referred to as object distinction information.

以上詳述したように撮像画面に工程表示板、カメラIDおよび撮像日時等を表示することにより表示される画像がどの工程で、どのカメラ装置で、何時撮像されたかが容易に把握できるので、データ管理、生産管理等の生産に関する種々の管理データを入手することが可能となる。また、工程表示板の画像、カメラIDあるいは撮像日時を各画像と対応付けて記録部202に記録することにより必要な画像を検索して容易に表示することもできる。なお、工程表示板の画像、カメラIDあるいは撮像日時等の対象物の区別情報は、画像処理による特徴の一致度検索、ID検索、日時検索等により容易に該当する画像を表示させることが可能であり、検索方法については、周知の方法であるので、詳細な説明は省略する。   As described above in detail, it is possible to easily grasp which process and which camera image was displayed by displaying the process display board, camera ID, imaging date and time, etc. on the imaging screen. Various management data relating to production such as production management can be obtained. In addition, a necessary image can be retrieved and easily displayed by recording the image on the process display board, the camera ID, or the imaging date and time in the recording unit 202 in association with each image. Note that the object discrimination information such as the image of the process display board, the camera ID, or the imaging date / time can be easily displayed by a feature matching degree search, ID search, date / time search, etc. by image processing. Since the search method is a well-known method, a detailed description is omitted.

また、先の説明では、不良品を取除くハンドリング装置110−1、110−2を説明したが、万一、不良品が発生し、組立て部品102−2がハンドリング装置110−1で取除かれた場合、即ち、図8の組立て部品102−2(点線で示す。)が取除かれた場合、組立て部品102−2は、センサ106−4以降のセンサでは、検知されなくなり、このままでは次に移動してきた組立て部品102−3が組立て部品102−2として誤って記録されることとなる。これを避けるためにハンドリング装置110が動作して、組立て部品102−2が取除かれた場合、その情報をカメラ103、Webエンコーダ104、記録装置108に通知し、取除かれた組立て部品102−2の撮影、記録を行わないようにする。   In the above description, the handling devices 110-1 and 110-2 for removing defective products have been described. However, in the unlikely event that defective products are generated, the assembly component 102-2 is removed by the handling device 110-1. In other words, when the assembly part 102-2 (shown by a dotted line) in FIG. 8 is removed, the assembly part 102-2 is not detected by the sensors after the sensor 106-4. The moved assembly part 102-3 is erroneously recorded as the assembly part 102-2. In order to avoid this, when the handling device 110 operates and the assembly component 102-2 is removed, the information is notified to the camera 103, the Web encoder 104, and the recording device 108, and the removed assembly component 102- is removed. 2. Do not shoot and record in 2.

図10は、上記のようにして組立て部品102−2が取除かれた場合の組立て部品102−1、102−2、・・・102−mの各組立ての過程の画像を表示したものである。図10から明らかなように組立て部品102−2は、カメラ装置103−1、103−2で撮影、記録された画像D21、D22は、表示されるが、それ以降の画像データは、記録されていない。従って、図10の一連の組立て工程の画像を解析すると、組立て部品102−2は、工程Cで不良になったことが容易に判断できる。   FIG. 10 shows an image of the process of assembling the assembly parts 102-1, 102-2,... 102-m when the assembly part 102-2 is removed as described above. . As is apparent from FIG. 10, the assembly part 102-2 displays the images D21 and D22 photographed and recorded by the camera apparatuses 103-1 and 103-2, but the subsequent image data is recorded. Absent. Therefore, by analyzing the images of the series of assembly processes in FIG. 10, it can be easily determined that the assembly component 102-2 has become defective in the process C.

このように、カメラ装置を順次切替えて対象物の画像を撮像し、記録することで、カメラ装置の死角が生じることなく、また、ネットワークカメラを用いることで同時に複数の対象物の画像データを記録することができ、対象物の製造の過程を一覧表示できる等の特徴がある。なお、本実施例では、ネットワークカメラを用いる場合について説明したが、映像のアナログ信号(例えば、NTSC信号等)を用いて処理を行うようにすることもできる。   In this way, the camera device is sequentially switched to capture and record the image of the object, so that the blind spot of the camera device does not occur, and the image data of a plurality of objects can be recorded simultaneously by using the network camera. It is possible to display a list of processes of manufacturing the object. In this embodiment, the case where a network camera is used has been described. However, it is also possible to perform processing using an analog video signal (for example, an NTSC signal).

図11は、アナログ信号をVTRに記録する場合の本発明の更に他の一実施例の概略構成を示すブロック図である。図11において、1101は、マトリックススイッチ(SW)、1102−1、1102−2、・・・1102−8は、VTRを示す(VTRを総称する場合は、VTR1102と称する。)。なお、図1と同じものには同じ符号が付されている。また、本実施例では、カメラ装置103およびVTR1102は、それぞれ8台設置されている場合(N=8の場合)を示しているが、これに限られるものでないことは言うまでもない。図12は、VTR1102の記録内容を示すもので、例えば、VTR1102−1、1102−2の記録内容を示している。以下動作を説明する。   FIG. 11 is a block diagram showing a schematic configuration of still another embodiment of the present invention when an analog signal is recorded in a VTR. In FIG. 11, reference numeral 1101 denotes a matrix switch (SW), 1102-1, 1102-2,... 1102-8 denotes a VTR (VTR is collectively referred to as VTR 1102). In addition, the same code | symbol is attached | subjected to the same thing as FIG. Further, in the present embodiment, the case where eight camera apparatuses 103 and eight VTRs 1102 are installed is shown (N = 8), but it goes without saying that the present invention is not limited to this. FIG. 12 shows the recorded contents of the VTR 1102, for example, the recorded contents of the VTRs 1102-1 and 1102-2. The operation will be described below.

カメラ装置103は、生産ライン上を移動する、例えば、組立て部品102を順次撮像する。撮像された映像は、マトリックススイッチ1101で適宜切替えられ、VTR1102に記録される。なお、マトリックススイッチ1101は、複数のカメラ装置103のそれぞれから送られてくる撮像映像を指定された複数のVTR1102のいずれのVTR1102に記録するかを選択するスイッチ回路であり、このスイッチ回路は、制御部(図示せず。)により制御されている。   The camera device 103 moves on the production line, for example, sequentially images the assembly parts 102. The captured video is appropriately switched by the matrix switch 1101 and recorded in the VTR 1102. The matrix switch 1101 is a switch circuit that selects which VTR 1102 of a plurality of designated VTRs 1102 captures captured images sent from each of the plurality of camera devices 103, and this switch circuit is a control circuit. Part (not shown).

ここで、一つの撮像、記録方法について説明する。まず、組立て部品102−1がカメラ装置103−1の撮像視野範囲に入ると、カメラ装置103−1は、組立て部品102−1の撮像を開始し、その撮像映像が、マトリックスSW1101を介してVTR1102−1に記録される。続いて、組立て部品102−1がカメラ装置103−2の撮像視野範囲に入ると、カメラ装置103−2は、組立て部品102−1の撮像を開始し、その撮像映像は、マトリックスSW1101で切替えられ、VTR1102−1に記録される。このように組立て部品102−1は、生産ライン上を移動し、各工程A、B、・・・Hを通過する毎に順次カメラ装置103−3、103−4、・・・103−8で撮像され、マトリックスSW1101で切替えられ、組立て部品102−1の製造過程がVTR1102−1に一連の画像データとして記録される。即ち、図12のVTR1102−1の記録内容の組立て部品102−1に示されるようにカメラ1、カメラ2、・・・カメラ8の一連の画像データとして記録される。   Here, one imaging and recording method will be described. First, when the assembly component 102-1 enters the imaging field of view of the camera device 103-1, the camera device 103-1 starts imaging of the assembly component 102-1, and the captured image is transmitted to the VTR 1102 via the matrix SW1101. Recorded as -1. Subsequently, when the assembly component 102-1 enters the imaging field of view of the camera device 103-2, the camera device 103-2 starts imaging of the assembly component 102-1, and the captured image is switched by the matrix SW1101. , Recorded in the VTR 1102-1. In this way, the assembly part 102-1 moves on the production line, and sequentially passes through each process A, B,... H, by the camera devices 103-3, 103-4,. Images are picked up and switched by the matrix SW 1101, and the manufacturing process of the assembly component 102-1 is recorded as a series of image data in the VTR 1102-1. That is, it is recorded as a series of image data of the camera 1, the camera 2,..., The camera 8 as shown in the assembly part 102-1 of the recording contents of the VTR 1102-1 in FIG.

同様に、組立て部品102−2がカメラ装置103−1の撮像視野範囲に入ると、カメラ装置103−1は、組立て部品102−2の撮像を開始し、その撮像映像が、マトリックスSW1101でVTR1102−2に記録される。続いて、組立て部品102−2がカメラ装置103−2の撮像視野範囲に入ると、カメラ装置103−2は、組立て部品102−2の撮像を開始し、その撮像映像は、マトリックスSW1101で切替えられ、VTR102−2に記録される。このように組立て部品102−2は、生産ライン上を移動し、各工程を通過する毎に順次カメラ装置103−3、103−4、・・・103−8で撮像され、マトリックスSW1101で切替えられ、組立て部品102−2の製造過程がVTR1102−2に一連の画像データとして記録される。即ち、図12のVTR1102−2の記録内容の組立て部品102−2に示されるようにカメラ1、カメラ2、・・・カメラ8の一連の画像データとして記録される。なお、各工程、例えば、工程Aから工程Hの8つの工程に組立て部品102が位置する場合でも各工程に位置する組立て部品102−1、102−2、・・・102−8の撮像映像は、8台のVTR1102にそれぞれ記録することができる。   Similarly, when the assembly component 102-2 enters the imaging field of view of the camera device 103-1, the camera device 103-1 starts imaging the assembly component 102-2, and the captured image is displayed in the matrix SW 1101 in the VTR 1102-. 2 is recorded. Subsequently, when the assembly component 102-2 enters the imaging field of view of the camera device 103-2, the camera device 103-2 starts imaging of the assembly component 102-2, and the captured image is switched by the matrix SW1101. , Recorded in the VTR 102-2. In this way, the assembly part 102-2 moves on the production line and is sequentially captured by the camera devices 103-3, 103-4,... 103-8 each time it passes through each process, and is switched by the matrix SW1101. The manufacturing process of the assembly part 102-2 is recorded as a series of image data in the VTR 1102-2. That is, it is recorded as a series of image data of the camera 1, the camera 2,..., The camera 8 as shown in the assembly part 102-2 of the recording contents of the VTR 1102-2 in FIG. In addition, even when the assembly part 102 is located in each process, for example, eight processes from the process A to the process H, the captured images of the assembly parts 102-1, 102-2,. , Can be recorded on each of eight VTRs 1102.

次に、組立て部品102−9(9番目の組立て部品を示す。)がカメラ装置103−1の撮像視野範囲に入ると、カメラ装置103−1は、組立て部品102−9の撮像を開始し、その撮像映像が、マトリックスSW1101でVTR1102−1に記録される。なお、この場合は、組立て部品102−9の撮像映像は、組立て部品102−1の撮像映像の次に引続いて記録される。以後同様である。即ち、図12のVTR1102−1の記録内容の組立て部品102−9に示すカメラ1、カメラ2、・・・カメラ8と言うように記録される。   Next, when the assembly component 102-9 (showing the ninth assembly component) enters the imaging field of view of the camera device 103-1, the camera device 103-1 starts imaging the assembly component 102-9, The captured image is recorded in the VTR 1102-1 by the matrix SW1101. In this case, the captured image of the assembly component 102-9 is recorded following the captured image of the assembly component 102-1. The same applies thereafter. That is, the recording contents of the recorded contents of the VTR 1102-1 in FIG.

このように図11で示す実施例では、1つの組立て部品についての撮像映像は、生産ライン101上を移動する組立て部品を追いかけるようにマトリックスSW1101は、カメラ装置103とVTR1102を切替える。従って、VTR1102には、編集作業を行わずに自動的に1つの組立て部品について、一連の工程での組立ての様子が連続した画像として記録することができるという特徴がある。また、カメラ装置103で撮像される画像は膨大な量となるが、VTRのような記録装置では、安価な大容量のテーブ媒体に記録できるので、このような用途には極めて経済的で好都合である。なお、VTRの代わりに他のHDD、DVDあるいは光ディスクのような記録装置で構成することもできる。   Thus, in the embodiment shown in FIG. 11, the matrix SW 1101 switches between the camera device 103 and the VTR 1102 so that the captured image of one assembly part follows the assembly part moving on the production line 101. Therefore, the VTR 1102 has a feature that an assembly state in a series of processes can be automatically recorded as a continuous image for one assembly part without performing an editing operation. Also, the amount of images captured by the camera device 103 is enormous, but a recording device such as a VTR can record on an inexpensive large-capacity tape medium, so it is extremely economical and convenient for such applications. is there. Note that a recording device such as another HDD, DVD, or optical disk may be used instead of the VTR.

以上、本発明について詳細に説明したが、本発明は、ここに記載された画像記録システムおよび記録画像の表示方法の実施例に限定されるものではなく、上記以外の画像記録システムおよび記録画像の表示方法に広く適応することが出来ることは、言うまでも無い。   Although the present invention has been described in detail above, the present invention is not limited to the embodiments of the image recording system and the recorded image display method described herein, and other image recording systems and recorded images than those described above. Needless to say, it can be widely applied to display methods.

本発明の一実施例の概略構成を示す図である。It is a figure which shows schematic structure of one Example of this invention. 本発明において使用する記録装置の概略構成のブロック図を示す。1 is a block diagram of a schematic configuration of a recording apparatus used in the present invention. 本発明の動作を説明するためのフローチャートを示す。The flowchart for demonstrating operation | movement of this invention is shown. 本発明の伝送データおよび記録装置に記録するデータを説明するための図である。It is a figure for demonstrating the transmission data of this invention, and the data recorded on a recording device. 本発明の撮像方法を説明するための図である。It is a figure for demonstrating the imaging method of this invention. 本発明の管理データの表示方法を説明するための図である。It is a figure for demonstrating the display method of the management data of this invention. 従来の画像記録システムの一例を示す図である。It is a figure which shows an example of the conventional image recording system. 本発明の他の一実施例の概略構成を示す図である。It is a figure which shows schematic structure of other one Example of this invention. 本発明の画像データの表示方法の一実施例を示す図である。It is a figure which shows one Example of the display method of the image data of this invention. 本発明の他の管理データの表示方法を説明するための図である。It is a figure for demonstrating the display method of the other management data of this invention. 本発明の更に他の一実施例の概略構成を示す図である。It is a figure which shows schematic structure of other one Example of this invention. 図11で使用するVTRの記録内容を説明する図である。It is a figure explaining the recording content of VTR used in FIG.

符号の説明Explanation of symbols

101:生産ライン、102、902:組立て部品、103、706:カメラ装置、104:Webエンコーダ、106、704:センサ、107:伝送路、108:記録装置、109:表示板、110:ハンドリング装置、201:CPU、202:記録部、203:メモリ部、204:I/F部、205:圧縮/伸張部、206:データ管理部、207:入出力部、208:操作部、209:バス、701:ベルトコンベア、702:組立て用カメラ部品、703:移動方向、705:トリガー発生器、707:画像処理装置、708:モニタ、709:画像、901:表示画面、1101:マトリックスSW、1102:VTR。
101: Production line, 102, 902: Assembly parts, 103, 706: Camera device, 104: Web encoder, 106, 704: Sensor, 107: Transmission path, 108: Recording device, 109: Display board, 110: Handling device, 201: CPU, 202: recording unit, 203: memory unit, 204: I / F unit, 205: compression / decompression unit, 206: data management unit, 207: input / output unit, 208: operation unit, 209: bus, 701 : Belt conveyor, 702: camera parts for assembly, 703: moving direction, 705: trigger generator, 707: image processing device, 708: monitor, 709: image, 901: display screen, 1101: matrix SW, 1102: VTR.

Claims (3)

適宜移動する対象物を順次撮像する複数のカメラ装置と、少なくとも上記複数のカメラ装置のそれぞれの視野範囲に上記対象物が搬入される時点を検出する検出手段と、上記複数のカメラ装置で撮像された画像を記録する記録装置とを有し、上記対象物が移動するに従って、複数の上記検出手段が順次トリガ信号を発生し、順次発生する上記トリガ信号に基づいて複数の上記カメラ装置で撮像された画像を順次上記記録装置に記録することを特徴とする画像記録システム。   Images are picked up by a plurality of camera devices that sequentially pick up images of objects that move as appropriate, detection means that detects when the objects are carried into at least the field of view of the plurality of camera devices, and the plurality of camera devices. A plurality of detecting means sequentially generating trigger signals as the object moves, and the plurality of camera devices pick up images based on the sequentially generated trigger signals. An image recording system for sequentially recording the images on the recording device. 請求項1記載の画像記録システムにおいて、上記移動する対象物が、所定の間隔に位置された複数の対象物であり、複数の上記検出手段は、それぞれの上記対象物がそれぞれの上記カメラ装置の視野範囲に入る時点を検出し、それぞれの上記カメラ装置がそれぞれの対象物を撮像すると共に、複数の上記検出手段からのトリガ信号に基づいて複数の上記カメラ装置で撮像された画像を上記対象物を区別する情報と共に順次上記記録装置に記録することを特徴とする画像記録システム。   The image recording system according to claim 1, wherein the moving object is a plurality of objects positioned at a predetermined interval, and the plurality of detection units are configured such that each of the objects is a position of each of the camera devices. A point in time when the camera enters the field of view is detected, and each of the camera devices captures an image of each object, and images captured by the plurality of camera devices based on trigger signals from the plurality of detection means are captured by the object. An image recording system, wherein information is recorded on the recording apparatus sequentially together with information for distinguishing the information. 適宜移動する複数の対象物を順次撮像する複数のカメラ装置と、上記複数のカメラ装置のそれぞれの視野範囲に上記対象物が入る時点を検出する検出手段と、上記複数のカメラ装置で撮像された画像を上記対象物を区別する情報と共に記録する記録装置とを有する画像記録システムであって、上記記録装置に記録された画像データを対象物の区別情報に基づいて検索し、上記対象物の所定の画像データを上記記録装置から読出し、表示部に所定対象物の上記移動順序に従って上記所定対象物の画像を表示することを特徴とする記録画像の表示方法。
A plurality of camera devices that sequentially image a plurality of objects that move as appropriate, a detection unit that detects a time point when the object enters the field of view of each of the plurality of camera devices, and images captured by the plurality of camera devices An image recording system having a recording device for recording an image together with information for distinguishing the object, searching image data recorded in the recording device based on the object distinction information, A method for displaying a recorded image, comprising: reading the image data from the recording device, and displaying the image of the predetermined object on the display unit in accordance with the moving order of the predetermined object.
JP2004367189A 2004-12-20 2004-12-20 Image recording system and recorded image displaying method Pending JP2006172350A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004367189A JP2006172350A (en) 2004-12-20 2004-12-20 Image recording system and recorded image displaying method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004367189A JP2006172350A (en) 2004-12-20 2004-12-20 Image recording system and recorded image displaying method

Publications (1)

Publication Number Publication Date
JP2006172350A true JP2006172350A (en) 2006-06-29

Family

ID=36673011

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004367189A Pending JP2006172350A (en) 2004-12-20 2004-12-20 Image recording system and recorded image displaying method

Country Status (1)

Country Link
JP (1) JP2006172350A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008199195A (en) * 2007-02-09 2008-08-28 Fujifilm Corp Camera device and its control method
WO2017017733A1 (en) * 2015-07-24 2017-02-02 富士通株式会社 Manufacturing process management system, manufacturing process management method, and manufacturing process management program
WO2017056263A1 (en) * 2015-09-30 2017-04-06 富士通株式会社 Manufacturing state display system, manufacturing state display method, and manufacturing state display program

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06106464A (en) * 1992-09-24 1994-04-19 Sanyo Electric Co Ltd Production control system
JP2002335453A (en) * 2001-05-08 2002-11-22 Hitachi Kokusai Electric Inc Solid-state imaging apparatus
JP2003150230A (en) * 2001-11-14 2003-05-23 Sharp Corp Operation picture management system and method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06106464A (en) * 1992-09-24 1994-04-19 Sanyo Electric Co Ltd Production control system
JP2002335453A (en) * 2001-05-08 2002-11-22 Hitachi Kokusai Electric Inc Solid-state imaging apparatus
JP2003150230A (en) * 2001-11-14 2003-05-23 Sharp Corp Operation picture management system and method

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008199195A (en) * 2007-02-09 2008-08-28 Fujifilm Corp Camera device and its control method
WO2017017733A1 (en) * 2015-07-24 2017-02-02 富士通株式会社 Manufacturing process management system, manufacturing process management method, and manufacturing process management program
US10540626B2 (en) 2015-07-24 2020-01-21 Fujitsu Limited Manufacturing process management system, manufacturing process management method, and non-transitory computer-readable recording medium recording manufacturing process management program
WO2017056263A1 (en) * 2015-09-30 2017-04-06 富士通株式会社 Manufacturing state display system, manufacturing state display method, and manufacturing state display program
JPWO2017056263A1 (en) * 2015-09-30 2018-07-19 富士通株式会社 Manufacturing status display system, manufacturing status display method, and manufacturing status display program
US10791297B2 (en) 2015-09-30 2020-09-29 Fujitsu Limited Manufacturing-state display system, manufacturing-state display method, and computer-readable recording medium

Similar Documents

Publication Publication Date Title
US10846529B2 (en) Image monitoring system and image monitoring program
JP4363421B2 (en) Monitoring system, monitoring system server and monitoring method
US20060119714A1 (en) Data processor and data processing method
US8174571B2 (en) Apparatus for processing images, apparatus for processing reproduced images, method of processing images, and method of processing reproduced images
US20070070199A1 (en) Method and apparatus for automatically adjusting monitoring frames based on image variation
JP2006081125A (en) Imaging system and imaging method
JPH11284987A (en) Image supervisory system
JP2008042695A (en) Monitor camera apparatus, monitor camera system, and method of recording monitor camera image
JP2004120178A (en) Video image recording apparatus
JP2009296207A (en) Monitored video recording system, and monitored video reproducing and displaying method
JP2006172350A (en) Image recording system and recorded image displaying method
JP2006197223A (en) Image monitoring system and image monitoring method
TWI699638B (en) Data collection and reproduction system
TW201143381A (en) Digital camera with upload function
KR101657522B1 (en) Network camera and method for operating recorder thereof
CN100359921C (en) Imaging apparatus, imaging method, imaging system, program
EP2541356B1 (en) Processing monitoring data in a monitoring system
JP2001186530A (en) Multiple channel image compressor and method therefor
JP2004241834A (en) Moving picture generating apparatus and method, moving picture transmission system, program, and recording medium
JP2004172929A (en) Recording device and computer program for recording method, and monitoring system
JP3665625B2 (en) Image monitoring device
JP3507806B2 (en) Object recording device
JPH10276359A (en) Tracking device and tracking method
JP2004200809A (en) Indoor remote supervisory system
JP3979729B2 (en) Video recording apparatus and video recording method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20071204

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20100331

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100616

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100622

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100804

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20101207