KR101932791B1

KR101932791B1 - Safety system for injection molding machine

Info

Publication number: KR101932791B1
Application number: KR1020140182676A
Authority: KR
Inventors: 안드레이 사보르
Original assignee: 엘에스엠트론 주식회사
Priority date: 2014-12-17
Filing date: 2014-12-17
Publication date: 2018-12-26
Also published as: KR20160073848A

Abstract

영상 촬영에 의해 사출 성형기를 중심으로 사용자의 위치 및 모션을 파악하여 안전 사고를 예방할 수 있는 사출 성형기의 안전 시스템이 개시된다. 본 발명에 따른 안전 시스템은, 사출 성형기가 설치된 위치를 포함하는 영역을 촬영하여 깊이 영상 및 색상 영상을 출력하는 적어도 하나 이상의 센서; 및 상기 적어도 하나 이상의 센서로부터 상기 깊이 영상 및 상기 색상 영상을 수신하고 이를 토대로 관제 영상을 표시하며, 상기 깊이 영상 및 상기 색상 영상을 이용하여 물체의 움직임을 인식하는 모션 트래킹 기능을 수행하여 특정 모션이 인식될 경우에는 그에 해당하는 이벤트를 상기 관제 영상에 출력하는 모니터링 장치;를 포함한다.A safety system for an injection molding machine capable of preventing a safety accident by grasping a position and a motion of a user around an injection molding machine by image shooting. The safety system according to the present invention comprises at least one sensor for photographing an area including a position where an injection molding machine is installed and outputting a depth image and a color image; And a controller for receiving the depth image and the color image from the at least one sensor and displaying a control image based on the depth image and the color image, and performing a motion tracking function for recognizing the motion of the object using the depth image and the color image, And a monitoring device for outputting the corresponding event to the control image when it is recognized.

Description

[0001] SAFETY SYSTEM FOR INJECTION MOLDING MACHINE [0002]

본 발명은 사출 성형기에 관한 것으로, 보다 구체적으로 사출 성형기의 안전 시스템에 관한 것이다.The present invention relates to an injection molding machine, and more particularly, to a safety system of an injection molding machine.

사출 성형기는 용융 수지를 사출장치로부터 사출하여 금형장치의 캐비티에 충전하고 고화시킴으로써 성형품을 성형하는 기기이다. 금형장치는 고정금형 및 이동금형으로 구성되고, 금형장치의 형폐, 형체 및 형개는 형체장치에 의하여 행하여진다. 형체장치는 이동형판과 고정형판 그리고 이동형판을 이동시키기 위한 모터 등의 구동원과 토글기구를 포함한다.An injection molding machine is a device for molding a molded product by injecting a molten resin from an injection device, filling it in a cavity of a mold apparatus, and solidifying it. The mold apparatus is constituted by a stationary mold and a movable mold, and mold closing, mold clamping and mold opening of the mold apparatus are performed by a mold clamping apparatus. The mold clamping apparatus includes a movable plate, a fixed plate, and a driving source such as a motor for moving the movable plate and a toggle mechanism.

이러한 사출 성형기를 작동하기 위해서는 안전 작업 수칙을 준수해야 한다. 예를 들어, 사용자는 작업 시작 전 사출 성형기의 실린더, 금형, 제춤취출장치 등의 청소 상태를 확인해야 하고, 운전 조작 스위치를 수동으로 놓고 형체, 형개를 작동하여 이상 유무를 확인해야 한다. 또한 실린더의 각 존의 온도가 일정하게 유지되도록 주의해야 하고, 형체 압력을 적정 수준으로 해야 한다. 이러한 안전 작업 수칙에 따라 사출 성형기는 형체장치의 운동 부분, 사출장치의 운동 부분, 전단점이나 물림점 부분, 감전 위험 부분, 고열 부분이나 고열 재료에 접근하지 못하도록 안전문을 설치하여 안전문을 닫지 않으면 사출 성형기가 동작하지 않도록 한다.In order to operate these injection molding machines, safety work rules must be observed. For example, the user must check the cleaning state of the cylinder, the mold, and the take-out device of the injection molding machine before the start of the operation, and manually check the state of operation by operating the mold and mold. Also, care should be taken to ensure that the temperature of each zone of the cylinder remains constant and the mold clamping pressure should be at an appropriate level. In accordance with these safety practices, the injection molding machine is equipped with a safety gauge to prevent access to the moving parts of the mold clamping device, the moving parts of the injection device, the breaking points or bite points, the electric shock hazard areas, Otherwise, the injection molding machine is not operated.

이와 같이 사출 성형기는 고온의 재료를 취급하고 큰 압력을 발생시키는 장비들을 사용하고 있어 사용자가 작업에 숙력되어 있지 않은 경우 안전 사고가 발생하는 문제점이 있다. 이러한 안전 사고의 발생을 방지하기 위한 대책으로 대부분 위에서 설명한 바와 같은 안전 작업 수칙만을 배포하고 있는 실정이고, 일부 사출 성형기의 경우 안전문을 설치하여 인가되지 않은 사용자들이 사출 성형기에 접근하는 것을 차단하고 있을 뿐, 안전문을 열고 비숙련 사용자가 사출 성형기에 접근하는 경우 안전 사고를 방지할 수 없다.As such, the injection molding machine uses equipment for handling high-temperature materials and generating a large pressure, thereby causing a safety accident if the user is not skilled in the work. As a countermeasure to prevent the occurrence of such a safety accident, most of the above-mentioned safety work rules are only distributed. In some injection molding machines, safety glasses are installed to prevent unauthorized users from approaching the injection molding machine However, safety accidents can not be prevented if the unskilled user opens the injection molding machine and a non-skilled user approaches the injection molding machine.

한국등록특허 제10-0622599호(2006.09.04)Korean Patent No. 10-0622599 (September 4, 2006)

본 발명은 상기와 같은 문제점을 해결하기 위해 제안된 것으로, 영상 촬영에 의해 사출 성형기를 중심으로 사용자의 위치 및 모션을 파악하여 안전 사고를 예방할 수 있는 사출 성형기의 안전 시스템을 제공하는데 그 목적이 있다. SUMMARY OF THE INVENTION It is an object of the present invention to provide a safety system for an injection molding machine capable of preventing a safety accident by grasping the position and motion of a user around an injection molding machine by image shooting .

상기 목적을 달성하기 위한 본 발명의 일 측면에 따른 안전 시스템은, 사출 성형기가 설치된 위치를 포함하는 영역을 촬영하여 깊이 영상 및 색상 영상을 출력하는 적어도 하나 이상의 센서; 및 상기 적어도 하나 이상의 센서로부터 상기 깊이 영상 및 상기 색상 영상을 수신하고 이를 토대로 관제 영상을 표시하며, 상기 깊이 영상 및 상기 색상 영상을 이용하여 물체의 움직임을 인식하는 모션 트래킹 기능을 수행하여 특정 모션이 인식될 경우에는 그에 해당하는 이벤트를 상기 관제 영상에 출력하는 모니터링 장치;를 포함한다.According to an aspect of the present invention, there is provided a safety system including at least one sensor for photographing a region including a position where an injection molding machine is installed and outputting a depth image and a color image; And a controller for receiving the depth image and the color image from the at least one sensor and displaying a control image based on the depth image and the color image, and performing a motion tracking function for recognizing the motion of the object using the depth image and the color image, And a monitoring device for outputting the corresponding event to the control image when it is recognized.

상기 모니터링 장치는, 상기 깊이 영상 및 상기 색상 영상을 이용하여 물체의 움직임을 인식하는 모션 트래킹 기능을 수행하여 특정 모션이 인식될 경우에는 그에 해당하는 이벤트를 상기 관제 영상에 출력할 수 있다.The monitoring device may perform a motion tracking function of recognizing the motion of an object using the depth image and the color image, and may output a corresponding event to the control image when a specific motion is recognized.

상기 모니터링 장치는, 상기 이벤트에 기초하여 상기 사출 성형기를 제어할 수 있다.The monitoring device may control the injection molding machine based on the event.

상기 모니터링 장치는, 상기 색상 영상을 이용하여 얼굴 인식을 수행하고 미리 등록되어 있는 얼굴 이미지와 비교하여 이에 관한 이벤트를 상기 관제 영상에 출력할 수 있다.The monitoring device may perform face recognition using the color image, compare the face image with a registered face image, and output an event related to the face image to the control image.

상기 모니터링 장치는, 상기 깊이 영상 및 상기 색상 영상을 이용하여 3D 관제 영상을 표시할 수 있다.The monitoring apparatus may display the 3D control image using the depth image and the color image.

상기 적어도 하나 이상의 센서는, 음성을 수집하는 마이크로폰을 포함하고, 상기 모니터링 장치는, 상기 적어도 하나 이상의 센서로부터 상기 마이크로폰을 통해 수집된 음성의 오디오 데이터를 수신하여 출력할 수 있다.The at least one sensor may include a microphone for collecting voice, and the monitoring device may receive and output audio data of the voice collected through the microphone from the at least one sensor.

상기 모니터링 장치는, 상기 적어도 하나 이상의 센서의 설치 위치 및 상기 깊이 영상을 이용하여 상기 영역 내 진입한 물체의 위치를 계산하고 그 계산된 위치에 따른 이벤트를 상기 관제 영상에 출력할 수 있다.The monitoring apparatus may calculate the position of the object entering the area using the installation position of the at least one sensor and the depth image, and output an event according to the calculated position to the control image.

상기 적어도 하나 이상의 센서는, 네 개의 센서로서 각 센서의 촬영 영역에 상기 사출 성형기가 위치하도록 배치될 수 있다.The at least one sensor may be arranged so that the injection molding machine is positioned in an imaging region of each sensor as four sensors.

상기 모니터링 장치는, 화면을 상기 센서들의 개수만큼 분할하고 각 분할 화면에 각 센서의 촬영 영상을 표시할 수 있다.The monitoring device may divide the screen by the number of the sensors and display the photographed images of the respective sensors on each divided screen.

상기 센서들은, 키넥트 센서일 수 있다.The sensors may be Kinect sensors.

도 1은 본 발명의 일 실시예에 따른 사출 성형기의 안전 시스템을 나타낸 도면이다.
도 2는 도 1의 키넥트 센서의 구성을 나타낸 도면이다.
도 3은 도 1의 모니터링 장치의 구성을 나타낸 도면이다.
도 4는 본 발명의 다른 실시예에 따른 사출 성형기의 안전 시스템을 나타낸 도면이다.1 is a view illustrating a safety system of an injection molding machine according to an embodiment of the present invention.
FIG. 2 is a view showing a configuration of the Kinect sensor of FIG. 1; FIG.
3 is a diagram showing a configuration of the monitoring apparatus of FIG.
4 is a view illustrating a safety system of an injection molding machine according to another embodiment of the present invention.

상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일 실시예를 상세히 설명하기로 한다.The foregoing and other objects, features and advantages of the present invention will become more apparent from the following detailed description of the present invention when taken in conjunction with the accompanying drawings, in which: There will be. In the following description, well-known functions or constructions are not described in detail since they would obscure the invention in unnecessary detail. Hereinafter, a preferred embodiment of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 사출 성형기의 안전 시스템을 나타낸 도면이고, 도 2는 도 1의 키넥트 센서의 구성을 나타낸 도면이다. FIG. 1 is a view showing a safety system of an injection molding machine according to an embodiment of the present invention, and FIG. 2 is a view showing the construction of the Kinect sensor of FIG.

도 1을 참조하면 본 실시예에 따른 안전 시스템은, 사출 성형기(110), 키넥트 센서(130) 및 모니터링 장치(140)를 포함한다.Referring to FIG. 1, the safety system according to the present embodiment includes an injection molding machine 110, a Kinect sensor 130, and a monitoring device 140.

사출 성형기(110)는 프레임과, 프레임 상에 배치된 사출장치 및 형체장치 등으로 구성된다. 사출장치는 가열 실린더, 호퍼, 상기 가열 실린더 내에서 진퇴 가능하고 회전 가능하게 설치된 스크루, 상기 가열 실린더의 외주면에 설치되어 가열 실린더를 가열하는 히터, 상기 스크류를 회전시키는 계량모터, 상기 스크류를 전진시켜 사출을 하는 사출모터 등의 장비들을 포함한다. 형체장치는 프레임에 고정된 고정금형 지지장치로서의 고정형판과, 상기 고정형판에 대향하여 설치되며 상기 고정금형에 대향하는 이동금형이 설치된 이동형판과, 그 이동형판을 이동시키는 토글 기구 및 모터 등의 장비를 포함한다. 이러한 사출 성형기(110)는 모니터링 장치(140)에 의해 제어된다.The injection molding machine 110 is constituted by a frame, an injection apparatus and a mold clamping apparatus arranged on the frame, and the like. The injection apparatus includes a heating cylinder, a hopper, a screw rotatably installed and retractable in the heating cylinder, a heater installed on an outer circumferential surface of the heating cylinder for heating the heating cylinder, a metering motor for rotating the screw, And an injection motor for injection. The mold clamping apparatus includes a fixed plate as a stationary mold supporting device fixed to a frame, a movable plate provided opposite to the stationary plate and provided with a movable mold facing the stationary mold, a toggle mechanism for moving the movable plate, Equipment. This injection molding machine 110 is controlled by the monitoring device 140.

도 1을 참조하면, 사출 성형기(110)를 중심으로 네 개의 키넥트 센서(130)가 일정한 간격으로, 즉 정방형으로 배치되어 관제 영역을 설정한다. 키넥트 센서(130) 간의 거리는 a이고 키넥트 센서(130)로부터 사출 성형기(110)까지의 거리는 dmax이며, h는 두 개의 키넥트 센서(130)를 연결하는 선과 해당 두 개의 키넥트 센서(130)의 커버 영역의 교점 사이의 거리로 어느 키넥트 센서도 커버하지 않는 영역을 나타낸다. 그리고 키넥트 센서(130)는 후술하는 카메라(131, 132)들을 구비하고 카메라(131, 132)들은 70도의 수평 화각과 60도의 수직 화각을 갖는다. 도 1은 평면도로서 도 1에 도시된 키넥트 센서(130)의 화각(α)은 수평 화각으로서 70도이다. Referring to FIG. 1, four kinetic sensors 130 are disposed at regular intervals, that is, in a square, around the injection molding machine 110 to set a control region. The distance between the Kinect sensors 130 is a and the distance from the Kinect sensor 130 to the injection molding machine 110 is dmax and h is a line connecting the two Kinect sensors 130 and the corresponding two Kinect sensors 130 ) Covers the area that does not cover any Kinect sensor. The Kinect sensor 130 includes cameras 131 and 132 described later, and the cameras 131 and 132 have a horizontal angle of view of 70 degrees and a vertical angle of view of 60 degrees. 1 is a plan view of the Kinect sensor 130 shown in FIG. 1, and the angle of view? Is 70 degrees as a horizontal angle of view.

도 2를 참조하면, 키넥트 센서(130)는 깊이 카메라(131), 색상 카메라(132), 마이크로폰(133), 통신부(134) 및 이들을 제어하는 제어부(135)를 포함한다. 키넥트 센서(130)는 마이크로소프트사에서 개발된 행동 분석 센서로서 주로 로봇이나 게임에 이용되고 있는데 본 실시예에서는 이러한 키넥트 센서(130)를 사출 성형기(110)의 안전 시스템에 이용한다. 본 실시예에서는 키넥트 센서를 예로 들어 설명하지만, 깊이 카메라, 색상 카메라 및 마이크로폰을 구비하며 통신 기능을 구비한 센서라면 적용이 가능하다.2, the Kinect sensor 130 includes a depth camera 131, a color camera 132, a microphone 133, a communication unit 134, and a control unit 135 for controlling them. The Kinect sensor 130 is a behavior analysis sensor developed by Microsoft Corporation. It is mainly used in a robot or a game. In this embodiment, the Kinect sensor 130 is used in a safety system of the injection molding machine 110. Although the present embodiment describes a Kinect sensor as an example, the present invention can be applied to a sensor having a depth camera, a color camera, a microphone, and a communication function.

상기 깊이 카메라(131)는 물체의 깊이를 측정하는 카메라로서 깊이 정보를 측정하여 깊이 영상을 출력한다. 바람직하게는 깊이 카메라(131)는 적외선 패턴에 의하여 깊이 정보를 측정하는 카메라이다. 깊이 카메라(131)는 적외선 송출부와 수신부로 구성되어 송출부에서 송출된 적외선이 물체에 맞고 반사되면, 수신부에서 반사되는 적외선을 수신하여 물체의 깊이를 측정한다. 색상 카메라(132)는 통상의 RGB 카메라로서 물체의 색상 영상을 출력한다. 마이크로폰(133)은 음성을 수신하여 전기 신호로 변환하는 장치이다. 제어부(135)는 키넥트 센서(130)의 전체적인 동작을 제어하며 카메라(131, 132)에서 촬영된 영상 데이터와 마이크로폰(133)을 통해 수집된 음성의 오디오 데이터를 통신부(134)를 통해 모니터링 장치(140)로 전송한다. 이러한 키넥트 센서(130)는 최대 6명의 사람을 인식할 수 있고, 또한 각 사람의 25 개의 관절을 인식할 수 있도록 지원한다.The depth camera 131 is a camera for measuring the depth of an object and measures depth information and outputs a depth image. Preferably, the depth camera 131 is a camera for measuring depth information by an infrared ray pattern. The depth camera 131 is composed of an infrared ray transmitting unit and a receiving unit. When the infrared ray emitted from the transmitting unit is reflected by the object, the depth camera 131 receives the infrared ray reflected from the receiving unit and measures the depth of the object. The color camera 132 outputs a color image of an object as a normal RGB camera. The microphone 133 is a device for receiving voice and converting it into an electric signal. The control unit 135 controls the overall operation of the KNext sensor 130 and transmits audio data of the audio collected through the microphone 133 and the video data photographed by the cameras 131 and 132 to the monitoring device 130 via the communication unit 134. [ (140). The Kinect sensor 130 recognizes up to six persons and also supports recognition of each person's twenty-five joints.

모니터링 장치(140)는 상기 키넥트 센서(130)들로부터 모니터링 데이터를 수신하고 그 수신된 모니터링 데이터를 가공하여 그래픽 유저 인터페이스를 통해 관제 영상을 디스플레이 수단에 표시할 수 있다. 여기서 상기 모니터링 데이터는 카메라에 의해 촬영된 영상 데이터, 마이크로폰(133)에 의해 수집된 오디오 데이터를 포함한다. 바람직하게, 모니터링 장치(140)는 관제 영상을 상기 키넥트 센서(130)의 개수만큼 분할하고 각 분할 영역에 각 키넥트 센서(130)의 촬영 영상을 표시할 수 있다. 상기 관제 영상은, 상기 키넥트 센서(130)로부터 수신된 깊이 영상 및 색상 영상을 기초로 가공되어 관리자에게 제공되는 화면으로서 깊이 영상과 색상 영상 중 어느 하나만을 표시할 수 있고 또는 깊이 영상과 색상 영상을 구분하여 함께 표시할 수 있으며, 또는 깊이 영상과 색상 영상을 이용하여 생성된 3D 영상이 표시될 수 있다. 이러한 관제 영상에는 사출 성형기(110)를 조작할 수 있는 사용자 인터페이스를 포함할 수 있고, 또한 모니터링 대상인 사출 성형기(110)를 표시하며 이벤트가 발생한 부분에 알람 등이 표시될 수 있는 종합 화면으로 이해될 수 있다.The monitoring device 140 may receive the monitoring data from the kinetic sensors 130 and process the received monitoring data to display the control image on the display means through the graphic user interface. Here, the monitoring data includes image data photographed by a camera, and audio data collected by a microphone 133. Preferably, the monitoring device 140 divides the control image by the number of the kinect sensors 130 and displays the photographed images of the respective key sensors 130 in the respective divided areas. The control image is displayed on the basis of the depth image and the color image received from the kinect sensor 130 and is provided to the administrator. The controller image can display either the depth image or the color image, And 3D images generated using the depth image and the color image can be displayed. Such a control image may include a user interface capable of operating the injection molding machine 110 and also displays an injection molding machine 110 to be monitored and may be understood as a composite image on which an alarm or the like may be displayed .

모니터링 장치(140)는 상기 모니터링 데이터를 이용하여 촬영 영상을 3D로 표현하여 디스플레이 수단에 표시할 수 있다. 즉 깊이 카메라(131)에 의해 촬영된 깊이 영상과 색상 카메라(132)에 의해 촬영된 색상 영상을 이용하여 3D 영상을 관제 영상으로서 디스플레이 수단에 표시할 수 있다.The monitoring device 140 may display the photographed image in 3D using the monitoring data, and display the photographed image on the display means. That is, the depth image captured by the depth camera 131 and the color image captured by the color camera 132 can be used to display the 3D image as the control image on the display means.

모니터링 장치(140)는 상기 색상 카메라(132) 및 상기 깊이 카메라(131)를 이용하여 촬영된 영상을 이용하여 물체의 움직임을 인식하는 모션 트래킹(motion tracking) 기능을 수행하고 모션 트래킹을 통해 특정 모션이 인식될 경우에는 그에 해당하는 이벤트(event)를 발생시켜 관제 영상에 출력할 수 있다. 예컨대 사용자가 사출 성형기(110)의 안전문을 여는 행위를 할 때 이에 관한 알람을 관제 영상에 출력할 수 있다. The monitoring device 140 performs a motion tracking function of recognizing the motion of the object using the image captured using the color camera 132 and the depth camera 131 and performs a motion tracking function An event corresponding thereto can be generated and output to the control image. For example, when the user performs an operation to open the safety mask of the injection molding machine 110, an alarm related to the alarm can be output to the control image.

또한, 모니터링 장치(140)는 상기 색상 카메라(132)를 이용하여 촬영된 영상을 이용하여 얼굴 인식 기능을 수행할 수 있다. 모니터링 장치(140)는 미리 등록되어 있는 얼굴 이미지와 상기 색상 카메라(132)의 촬영 영상에서 인식된 얼굴을 비교하여 이에 관한 이벤트(event)를 발생시킨다. 예컨대 등록되어 있지 않은 얼굴이 인식되는 경우 모니터링 장치(140)는 알람을 관제 영상에 출력할 수 있다.In addition, the monitoring device 140 may perform a face recognition function using an image photographed using the color camera 132. The monitoring device 140 compares the face image registered in advance with the face recognized in the photographed image of the color camera 132 and generates an event related thereto. For example, when an unregistered face is recognized, the monitoring device 140 can output an alarm to the control image.

또한, 모니터링 장치(140)는 키넥트 센서(130)의 설치 위치, 키넥트 센서(130)의 카메라들의 수평 및 수직 화각, 그리고 상기 깊이 카메라(131)로 촬영된 깊이 영상을 통해 관제 영역(Area)에 진입한 사용자의 위치를 계산하고, 그 계산된 위치에 기초하여 지도 맵, 예컨대 공장의 평면도에 사용자의 위치를 표시할 수 있고, 또한 사용자의 위치에 따라 이벤트를 발생시켜 관제 영상에 출력할 수 있다. 모니터링 장치(140)는 이벤트별 안내 문구를 저장하고 이벤트에 대응하는 안내 문구를 관제 영상에 표시할 수 있다. 또한 모니터링 장치(140)는 모니터링 데이터에 포함된 오디오 데이터에 기초하여 오디오 신호를 스피커 등을 통해 출력할 수 있다.The monitoring device 140 may also monitor the depth of the control area 130 through the installation location of the kinect sensor 130, the horizontal and vertical angles of view of the cameras of the Kinect sensor 130, ), And based on the calculated position, the position of the user can be displayed on the map map, for example, the floor plan of the factory, and an event is generated according to the position of the user and is output to the control image . The monitoring device 140 may store the guidance text for each event and display the guidance text corresponding to the event on the control image. In addition, the monitoring apparatus 140 can output an audio signal through a speaker or the like based on the audio data included in the monitoring data.

또한 모니터링 장치(140)는 사출 성형기(110)를 제어할 수 있다. 모니터링 장치(140)는 모션 트래킹 또는 얼굴 인식 등에 의해 이벤트 발생시 해당 이벤트에 따른 표준 작업 프로세스(SOP)에 따라 사출 성형기(110)를 제어할 수 있다. 예를 들어, 등록되지 않은 얼굴이 인식되는 경우 사출 성형기(110)의 안전문을 닫거나, 가열 실린더 근처에 사람이 있는 경우 가열 실린더의 히터를 정지하는 등의 제어를 할 수 있다. 또한 모니터링 장치(140)는 관제 영상에 표시된 사출 성형기 조작을 위한 사용자 인터페이스에서 사용자의 입력이 수신되면 사용자의 입력에 따라 사출 성형기(110)를 제어할 수 있다.The monitoring device 140 may also control the injection molding machine 110. The monitoring device 140 can control the injection molding machine 110 according to a standard work process (SOP) according to the event when an event is generated by motion tracking, face recognition, or the like. For example, in the case where an unregistered face is recognized, it is possible to close the safety glass of the injection molding machine 110 or to control the heater of the heating cylinder to stop when a person is present near the heating cylinder. Also, the monitoring device 140 may control the injection molding machine 110 according to a user's input when a user's input is received from a user interface for operation of the injection molding machine displayed on the control image.

도 3은 도 1의 모니터링 장치의 구성을 나타낸 도면으로, 도 3을 참조하면, 모니터링 장치(140)는 메모리(210), 메모리 제어기(221), 하나 이상의 프로세서(CPU)(222), 주변 인터페이스(223), 입출력(I/O) 서브시스템(230), 디스플레이 장치(241), 입력 장치(242) 및 통신 회로(252)를 포함한다. 이러한 구성요소는 하나 이상의 통신 버스 또는 신호선을 통하여 통신한다. 도 2에 도시한 여러 구성요소는 하나 이상의 신호 처리 및/또는 애플리케이션 전용 집적 회로(application specific integrated circuit)를 포함하여, 하드웨어, 소프트웨어 또는 하드웨어와 소프트웨어 둘의 조합으로 구현될 수 있다.3, the monitoring device 140 includes a memory 210, a memory controller 221, one or more processors (CPU) 222, a peripheral interface An input / output (I / O) subsystem 230, a display device 241, an input device 242 and a communication circuit 252. These components communicate through one or more communication buses or signal lines. The various components shown in FIG. 2 may be implemented in hardware, software, or a combination of both hardware and software, including one or more signal processing and / or application specific integrated circuits.

메모리(210)는 고속 랜덤 액세스 메모리를 포함할 수 있고, 또한 하나 이상의 자기 디스크 저장 장치, 플래시 메모리 장치와 같은 불휘발성 메모리, 또는 다른 불휘발성 반도체 메모리 장치를 포함할 수 있다. 메모리(210)는 키넥트 센서(130)로부터 수신된 영상 데이터, 오디오 데이터, 이벤트별 안내 문구 등을 저장할 수 있다. The memory 210 may include a high speed random access memory and may also include one or more magnetic disk storage devices, non-volatile memory such as a flash memory device, or other non-volatile semiconductor memory device. The memory 210 may store image data, audio data, event-specific announcement phrases, etc., received from the keynote sensor 130.

일부 실시예에서, 메모리(210)는 하나 이상의 프로세서(222)로부터 멀리 떨어져 위치하는 저장 장치, 예를 들어 통신 회로(252)와, 인터넷, 인트라넷, LAN(Local Area Network), WLAN(Wide LAN), SAN(Storage Area Network) 등, 또는 이들의 적절한 조합과 같은 통신 네트워크(도시하지 않음)를 통하여 액세스되는 네트워크 부착형(attached) 저장 장치를 더 포함할 수 있다. 프로세서(222) 및 주변 인터페이스(223)와 같은 모니터링 장치(140)의 다른 구성요소에 의한 메모리(210)로의 액세스는 메모리 제어기(221)에 의하여 제어될 수 있다.In some embodiments, the memory 210 may include a storage device, e.g., a communication circuit 252, located remotely from the one or more processors 222, and an Internet, Intranet, Local Area Network (WLAN) , A Storage Area Network (SAN), or the like, or any suitable combination thereof, via a network (not shown). Access to the memory 210 by other components of the monitoring device 140, such as the processor 222 and the peripheral interface 223, may be controlled by the memory controller 221.

주변 인터페이스(223)는 모니터링 장치(140)의 입출력 주변 장치를 프로세서(222) 및 메모리(210)와 연결한다. 하나 이상의 프로세서(222)는 다양한 소프트웨어 프로그램 및/또는 메모리(210)에 저장되어 있는 명령어 세트를 실행하여 모니터링 장치(140)를 위한 여러 기능을 수행하고 데이터를 처리한다. 일부 실시예에서, 주변 인터페이스(223), 프로세서(222) 및 메모리 제어기(221)는 칩(220)과 같은 단일 칩 상에서 구현될 수 있고 또는 별개의 칩으로 구현될 수 있다.The peripheral interface 223 couples the input / output peripheral device of the monitoring device 140 to the processor 222 and the memory 210. The one or more processors 222 execute various software programs and / or a set of instructions stored in the memory 210 to perform various functions and process data for the monitoring device 140. In some embodiments, peripheral interface 223, processor 222 and memory controller 221 may be implemented on a single chip, such as chip 220, or may be implemented as separate chips.

I/O 서브시스템(230)은 디스플레이 장치(241) 및 입력 장치(242)와 같은 입출력 주변장치와 주변 인터페이스(223) 사이에 인터페이스를 제공한다. The I / O subsystem 230 provides an interface between the input / output peripheral devices, such as the display device 241 and the input device 242, and the peripheral interface 223.

디스플레이 장치(241)는 LCD(liquid crystal display) 기술 또는 LPD(light emitting polymer display) 기술을 사용할 수 있고, 이러한 디스플레이 장치(241)는 용량형, 저항형, 적외선형 등의 터치 디스플레이일 수 있다. 터치 디스플레이는 모니터링 장치(140)와 사용자 사이에 출력 인터페이스 및 입력 인터페이스를 제공한다. 터치 디스플레이는 사용자에게 시각적인 출력을 표시한다. 시각적 출력은 텍스트, 그래픽, 비디오와 이들의 조합을 포함할 수 있다. 시각적 출력의 일부 또는 전부는 사용자 인터페이스 대상에 대응할 수 있다. 터치 디스플레이는 사용자 입력을 수용하는 터치 감지면을 형성한다.The display device 241 may be a liquid crystal display (LCD) technology or a light emitting polymer display (LPD) technology. The display device 241 may be a capacitive type, a resistive type, or an infrared type. The touch display provides an output interface and an input interface between the monitoring device 140 and the user. The touch display displays a visual output to the user. The visual output may include text, graphics, video, and combinations thereof. Some or all of the visual output may correspond to a user interface object. The touch display forms a touch sensitive surface that accommodates user input.

프로세서(222)는 모니터링 장치(140)에 연관된 동작을 수행하고 명령어들을 수행하도록 구성된 프로세서로서, 예를 들어, 메모리(210)로부터 검색된 명령어들을 이용하여, 모니터링 장치(140)의 컴포넌트 간의 입력 및 출력 데이터의 수신과 조작을 제어할 수 있다. The processor 222 is a processor configured to perform the operations associated with the monitoring device 140 and to perform the instructions and to use the instructions retrieved from the memory 210, Reception and manipulation of data can be controlled.

일부 실시예에서, 소프트웨어 구성요소는 운영 체제(211), 그래픽 모듈(명령어 세트)(212) 및 본 발명의 안전 시스템을 관리하는 모니터링 프로그램(명령어 세트)(213)이 메모리(210)에 탑재(설치)된다. In some embodiments, the software components include an operating system 211, a graphics module (instruction set) 212, and a monitoring program (instruction set) 213 that manages the safety system of the present invention, Installation).

운영 체제(211)는, 예를 들어, 다윈(Darwin), RTXC, LINUX, UNIX, OS X, WINDOWS 또는 VxWorks, 안드로이드 등과 같은 내장 운영체제일 수 있고, 일반적인 시스템 태스크(task)(예를 들어, 메모리 관리, 저장 장치 제어, 전력 관리 등)를 제어 및 관리하는 다양한 소프트웨어 구성요소 및/또는 장치를 포함하고, 다양한 하드웨어와 소프트웨어 구성요소 사이의 통신을 가능하게 한다.The operating system 211 may be an embedded operating system such as, for example, Darwin, RTXC, LINUX, UNIX, OS X, WINDOWS or VxWorks, Android, Management, storage control, power management, and the like), and enables communication between various hardware and software components.

그래픽 모듈(212)은 디스플레이 장치(241) 상에 그래픽을 제공하고 표시하기 위한 주지의 여러 소프트웨어 구성요소를 포함한다. "그래픽(graphics)"이란 용어는 텍스트, 웹 페이지, 아이콘(예컨대, 소프트 키를 포함하는 사용자 인터페이스 대상), 디지털 이미지, 비디오, 애니메이션 등을 제한 없이 포함하여, 사용자에게 표시될 수 있는 모든 대상을 포함한다.Graphics module 212 includes a number of well known software components for providing and displaying graphics on display device 241. The term "graphics" includes, without limitation, text, web pages, icons (e.g., user interface targets including soft keys), digital images, video, animations, .

통신 회로(252)는 외부 장치, 즉 키넥트 센서(130) 및 사출 성형기(110)와 무선 또는 유선으로 신호를 송수신한다. 통신 회로(252)는 무선으로 신호 송수신시 전기 신호를 전자파로 또는 그 반대로 변환하며 이 전자파를 통하여 키넥트 센서(130)와 통신한다. 통신 회로(252)는 유선으로 통신 신호의 송수신시 패킷 형태로 또는 광 케이블과 같은 케이블을 통해 광 신호로 키넥트 센서(130) 및 사출 성형기(110)와 데이터를 송수신할 수 있다.The communication circuit 252 transmits / receives signals to / from an external device, that is, the KNECK sensor 130 and the injection molding machine 110, wirelessly or by wire. The communication circuit 252 converts electrical signals to electromagnetic waves or vice versa when transmitting and receiving signals wirelessly, and communicates with the keynote sensor 130 through the electromagnetic waves. The communication circuit 252 can transmit and receive data to and from the Kinect sensor 130 and the injection molding machine 110 in the form of a packet in the form of a packet or a cable such as an optical cable.

통신 회로(252)는 예를 들어 안테나 시스템, RF 트랜시버, 하나 이상의 증폭기, 튜너, 하나 이상의 오실레이터, 디지털 신호 처리기, CODEC 칩셋, 메모리 등을 포함하지만 이에 한정되지 않는 이러한 기능을 수행하기 위한 주지의 회로를 포함할 수 있다. 통신 회로(252)는 월드 와이드 웹(World Wide Web, WWW)으로 불리는 인터넷, 인트라넷과 네트워크 및/또는, 셀룰러 전화 네트워크, 무선 LAN 및/또는 MAN(metropolitan area network)와 같은 무선 네트워크, 그리고 근거리 무선 통신에 의하여 키넥트 센서(130) 및 사출 성형기(110)와 통신할 수 있다. The communication circuitry 252 may be any circuit known in the art for performing such functions, including but not limited to, an antenna system, an RF transceiver, one or more amplifiers, a tuner, one or more oscillators, a digital signal processor, a CODEC chipset, . &Lt; / RTI > The communication circuitry 252 may be any type of communication network such as the Internet referred to as the World Wide Web (WWW), a network such as an intranet and / or a cellular telephone network, a wireless LAN and / or a metropolitan area network (MAN) And can communicate with the Kinect sensor 130 and the injection molding machine 110 by communication.

모니터링 프로그램(213)은 키넥트 센서(130)들로부터 수신된 모니터링 데이터를 가공하여 그래픽 유저 인터페이스를 통해 관제 영상을 디스플레이 장치(241)에 표시할 수 있다. 여기서 상기 모니터링 데이터는 카메라에 의해 촬영된 영상 데이터, 마이크로폰(133)에 의해 수집된 음성 데이터를 포함한다. 바람직하게, 모니터링 프로그램(213)은 관제 화면을 상기 키넥트 센서(130)의 개수만큼 분할하고 각 분할 영역에 각 키넥트 센서(130)의 촬영 영상을 표시할 수 있다.The monitoring program 213 may process the monitoring data received from the Kinect sensors 130 and display the control image on the display device 241 via the graphic user interface. Here, the monitoring data includes image data photographed by a camera and voice data collected by a microphone 133. Preferably, the monitoring program 213 divides the control screen by the number of the kinect sensors 130 and displays the photographed images of the respective Kinect sensors 130 in the respective divided areas.

또한 모니터링 프로그램(213)은 상기 모니터링 데이터를 이용하여 촬영 영상을 3D로 표현하여 디스플레이 수단에 표시할 수 있다. 즉 깊이 카메라(131)에 의해 촬영된 깊이 영상과 색상 카메라(132)에 의해 촬영된 색상 영상을 이용하여 3D 영상을 관제 영상으로서 디스플레이 장치(241)에 표시할 수 있다.In addition, the monitoring program 213 can display the photographed image in 3D using the monitoring data and display it on the display means. That is, the depth image captured by the depth camera 131 and the color image captured by the color camera 132 can be used to display the 3D image on the display device 241 as a control image.

모니터링 프로그램(213)은 상기 색상 카메라(132) 및 상기 깊이 카메라(131)를 이용하여 촬영된 영상을 이용하여 물체의 움직임을 인식하는 모션 트래킹(motion tracking) 기능을 수행하고 모션 트래킹을 통해 특정 모션이 인식될 경우에는 그에 해당하는 이벤트(event)를 발생시켜 관제 영상에 출력할 수 있다. 예컨대 사용자가 사출 성형기(110)의 안전문을 여는 행위를 할 때 이에 관한 알람을 관제 영상에 출력할 수 있다. The monitoring program 213 performs a motion tracking function of recognizing the motion of the object using the captured image using the color camera 132 and the depth camera 131, An event corresponding thereto can be generated and output to the control image. For example, when the user performs an operation to open the safety mask of the injection molding machine 110, an alarm related to the alarm can be output to the control image.

또한, 모니터링 프로그램(213)은 상기 색상 카메라(132)를 이용하여 촬영된 영상을 이용하여 얼굴 인식 기능을 수행할 수 있다. 모니터링 프로그램(213)은 미리 등록되어 있는 얼굴 이미지와 상기 색상 카메라(132)의 촬영 영상에서 인식된 얼굴을 비교하여 이에 관한 이벤트(event)를 발생시킨다. 예컨대 등록되어 있지 않은 얼굴이 인식되는 경우 모니터링 프로그램(213)은 알람을 관제 영상에 출력할 수 있다.In addition, the monitoring program 213 can perform a face recognition function using the captured image using the color camera 132. [ The monitoring program 213 compares the face image registered in advance with the face recognized in the captured image of the color camera 132 and generates an event related thereto. For example, when an unregistered face is recognized, the monitoring program 213 can output an alarm to the control image.

또한, 모니터링 프로그램(213)은 키넥트 센서(130)의 설치 위치, 키넥트 센서(130)의 카메라들의 수평 및 수직 화각, 그리고 상기 깊이 카메라(131)로 촬영된 깊이 영상을 통해 관제 영역(Area)에 진입한 사용자의 위치를 계산하고, 그 계산된 위치에 기초하여 지도 맵, 예컨대 공장의 평면도에 사용자의 위치를 표시할 수 있고, 또한 사용자의 위치에 따라 이벤트를 발생시켜 관제 영상에 출력할 수 있다. 모니터링 프로그램(213)은 이벤트에 대응하는 안내 문구를 관제 영상에 표시할 수 있다. 또한 모니터링 프로그램(213)은 모니터링 데이터에 포함된 오디오 데이터에 기초하여 오디오 신호를 스피커 등을 통해 출력할 수 있다.The monitoring program 213 is also used to monitor the installation area of the Kinect sensor 130 through the installation position of the Kinect sensor 130, the horizontal and vertical angles of view of the cameras of the Kinect sensor 130, ), And based on the calculated position, the position of the user can be displayed on the map map, for example, the floor plan of the factory, and an event is generated according to the position of the user and is output to the control image . The monitoring program 213 can display the guidance text corresponding to the event on the control image. Also, the monitoring program 213 can output an audio signal through a speaker or the like based on the audio data included in the monitoring data.

또한, 모니터링 프로그램(213)은 모션 트래킹 또는 얼굴 인식 등에 의해 이벤트 발생시 해당 이벤트에 따른 표준 작업 프로세스(SOP)에 따라 사출 성형기(110)를 제어할 수 있다. 또한 모니터링 프로그램(213)은 관제 영상에 표시된 사출 성형기 조작을 위한 사용자 인터페이스에서 사용자의 입력이 수신되면 사용자의 입력에 따라 사출 성형기(110)를 제어할 수 있다.In addition, the monitoring program 213 may control the injection molding machine 110 according to a standard work process (SOP) corresponding to the event when an event is generated by motion tracking, face recognition, or the like. In addition, the monitoring program 213 may control the injection molding machine 110 according to a user's input when a user's input is received from the user interface for operation of the injection molding machine displayed on the control image.

도 4는 본 발명의 다른 실시예에 따른 사출 성형기의 안전 시스템을 나타낸 도면이다. 도 4에 있어서 도 1과 동일한 참조부호의 구성요소는 도 1을 참조하여 설명한 기능 및 동작을 모두 포함한다. 도 1을 참조하여 설명한 안전 시스템과 비교하여 도 4에 도시된 안전 시스템은, 이동통신망(410) 및 관리자 단말(420)을 더 포함한다.4 is a view illustrating a safety system of an injection molding machine according to another embodiment of the present invention. In Fig. 4, the same reference numerals as those in Fig. 1 denote all the functions and operations described with reference to Fig. Compared with the security system described with reference to FIG. 1, the security system shown in FIG. 4 further includes a mobile communication network 410 and an administrator terminal 420.

이동통신망(410)은 GSM(Global System for Mobile Communication), EDGE(Enhanced Data GSM Environment), WCDMA(wideband code division multiple access), CDMA(code division multiple access), TDMA(time division multiple access), Wi-MAX, LTE(Long Term Evolution) 또는 본 출원의 출원 시점에 아직 개발되지 않은 통신 프로토콜을 포함하는 기타 다른 적절한 통신 프로토콜을 포함하지만 이에 한정되지 않는 복수의 통신 표준, 프로토콜 및 기술 중 어느 것을 이용할 수 있다. 이동통신망(410)은 음성 통신을 지원하는 회선 교환망과 패킷 통신을 지원하는 패킷 교환망을 포함할 수 있고, 또한 문자 메시지 서비스를 지원하는 SMSC(Short Message Service Center) 및 MMSC(Multimedia Message Service Center)를 포함한다.The mobile communication network 410 may be a wireless communication system such as a Global System for Mobile Communication (GSM), an Enhanced Data GSM Environment (EDGE), a wideband code division multiple access (WCDMA), a code division multiple access (CDMA), a time division multiple access (TDMA) Any of a plurality of communication standards, protocols, and techniques may be used, including but not limited to MAX, Long Term Evolution (LTE) or any other suitable communication protocol including communication protocols not yet developed at the time of filing of the present application . The mobile communication network 410 may include a circuit switching network for supporting voice communication and a packet switching network for supporting packet communication and may also include a Short Message Service Center (SMSC) and a Multimedia Message Service Center (MMSC) .

관리자 단말(420)은 상기 이동통신망(410)에 접속하여 패킷 통신, 문자 메시지 서비스 및 음성 통화를 지원하는 휴대용 통신 단말로서, 모니터링 장치(140)로부터 전송되는 알람 메시지 또는 관제 영상을 상기 이동통신망(410)으로부터 수신할 수 있는 단말이면 특별히 제한되지 않는다. 관리자 단말(420)은 문자 메시지를 수신할 수 있는 메시지 클라이언트와, 관제 영상을 수신하여 표시할 수 있는 모니터링 클라이언트를 포함할 수 있다.The administrator terminal 420 is a portable communication terminal that connects to the mobile communication network 410 and supports packet communication, text messaging service, and voice communication. The manager terminal 420 transmits an alarm message or control image transmitted from the monitoring device 140 to the mobile communication network 410 as long as the terminal can receive it. The administrator terminal 420 may include a message client capable of receiving a text message and a monitoring client capable of receiving and displaying the control image.

모니터링 장치(140)는 키넥트 센서(130)들로부터 수신되는 모니터링 데이터의 분석 결과 이벤트 발생시 그 이벤트 정보를 포함하는 문자 메시지를 상기 이동통신망(410)을 통해 상기 관리자 단말(420)로 전송한다. 또한 모니터링 장치(140)는 상기 관리자 단말(420)이 상기 이동통신망(410)의 패킷 교환망을 통해 접속해 오면 상기 관리자 단말(420)로 관제 영상을 전송한다. 따라서 관리자는 관제실에 있지 않는 경우에도 휴대용 관리자 단말(420)을 통해 사출 성형기(110)를 중심으로 한 관제 영역의 상황을 실시간으로 확인할 수 있다.The monitoring device 140 transmits a text message including the event information to the administrator terminal 420 through the mobile communication network 410 as a result of analysis of the monitoring data received from the keynote sensors 130. [ When the manager terminal 420 accesses the manager terminal 420 through the packet switching network of the mobile communication network 410, the monitoring apparatus 140 transmits the control image to the manager terminal 420. Accordingly, even when the manager is not in the control room, the administrator can check the status of the control area around the injection molding machine 110 in real time through the portable administrator terminal 420.

본 명세서는 많은 특징을 포함하는 반면, 그러한 특징은 본 발명의 범위 또는 특허청구범위를 제한하는 것으로 해석되어서는 안 된다. 또한, 본 명세서에서 개별적인 실시예에서 설명된 특징들은 단일 실시예에서 결합되어 구현될 수 있다. 반대로, 본 명세서에서 단일 실시예에서 설명된 다양한 특징들은 개별적으로 다양한 실시예에서 구현되거나, 적절히 결합되어 구현될 수 있다.While the specification contains many features, such features should not be construed as limiting the scope of the invention or the scope of the claims. In addition, the features described in the individual embodiments herein may be combined and implemented in a single embodiment. Conversely, various features described in the singular < Desc / Clms Page number 5 > embodiments herein may be implemented in various embodiments individually or in combination as appropriate.

이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention. The present invention is not limited to the drawings.

110 : 사출 성형기
130 : 키넥트 센서
140 : 모니터링 장치
131 : 깊이 카메라
132 : 색상 카메라
133 : 마이크로 폰
134 : 통신부110: Injection molding machine
130: Kinect sensor
140: Monitoring device
131: Depth camera
132: Color camera
133: Microphone
134:

Claims

At least one sensor for photographing an area including a position where the injection molding machine is installed and outputting a depth image and a color image; And
A controller for receiving the depth image and the color image from the at least one sensor, displaying a control image based on the depth image and the color image, and performing a motion tracking function for recognizing the motion of the object using the depth image and the color image, And outputting a corresponding event to the control image when the event is detected,
The monitoring device includes:
Wherein the control unit calculates the position of an object entering the area by using the installation position of the at least one sensor and the depth image, and outputs an event according to the calculated position to the control image.

The method according to claim 1,
The monitoring device includes:
Performs a face recognition using the color image, compares the face image with a previously registered face image, and outputs an event related thereto to the control image.

3. The method of claim 2,
The monitoring device includes:
And controls the injection molding machine based on the event.

The method according to claim 1,
The monitoring device includes:
And displays the 3D control image using the depth image and the color image.

The method according to claim 1,
Wherein the at least one sensor comprises a microphone for collecting voice,
Wherein the monitoring device receives and outputs audio data of the voice collected through the microphone from the at least one sensor.

delete

6. The method according to any one of claims 1 to 5,
Wherein the at least one sensor is arranged so that the injection molding machine is positioned in an imaging region of each sensor as four sensors.

8. The method of claim 7,
The monitoring device includes:
Wherein the control unit divides the screen by the number of the sensors and displays the photographed images of the respective sensors on the respective divided screens.

8. The method of claim 7,
The sensors,
Wherein the sensor is a Kinect sensor.