KR100887659B1 - Industrial automation system and method using image signal - Google Patents

Industrial automation system and method using image signal Download PDF

Info

Publication number
KR100887659B1
KR100887659B1 KR1020080064692A KR20080064692A KR100887659B1 KR 100887659 B1 KR100887659 B1 KR 100887659B1 KR 1020080064692 A KR1020080064692 A KR 1020080064692A KR 20080064692 A KR20080064692 A KR 20080064692A KR 100887659 B1 KR100887659 B1 KR 100887659B1
Authority
KR
South Korea
Prior art keywords
character
signal
video signal
information
output
Prior art date
Application number
KR1020080064692A
Other languages
Korean (ko)
Inventor
김용범
유완옥
Original Assignee
(주)시스윈일렉트로닉스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)시스윈일렉트로닉스 filed Critical (주)시스윈일렉트로닉스
Priority to KR1020080064692A priority Critical patent/KR100887659B1/en
Application granted granted Critical
Publication of KR100887659B1 publication Critical patent/KR100887659B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G06F3/1475—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels with conversion of CRT control signals to flat panel control signals, e.g. adapting the palette memory

Abstract

An industrial automation system and a method using an image signal are provided to automatically obtain character information outputted to a monitor screen without any additional software or hardware and to use the obtained character information as a member for controlling and automatizing a system. A graphic card(112) outputs an image signal as to state of a facility control device, and a recognition device(300) extracts character information by receiving an image signal outputted from the graphic card. An automatic device(500) generates a facility control signal and transmits the signal to an industrial facility. The image signal is inputted to a signal inputting unit(310), and a signal analyzing part(320) analyzes the image signal. A digital converting unit(330) converts an analog signal into a digital signal, and a character recognition processing unit(340) recognizes the character information form the information analyzed by the signal analyzing unit. A character recognizing unit(346) recognizes a character region extracted by a character region extracting unit as the character information.

Description

영상 신호를 이용한 산업용 자동화 시스템 및 방법{INDUSTRIAL AUTOMATION SYSTEM AND METHOD USING IMAGE SIGNAL}Industrial automation system and method using image signal {INDUSTRIAL AUTOMATION SYSTEM AND METHOD USING IMAGE SIGNAL}

본 발명은 영상 신호를 이용한 산업용 자동화 시스템 및 산업용 자동화 방법에 관한 것이다.The present invention relates to an industrial automation system and an industrial automation method using video signals.

최근 멀티미디어 분야와 통신기술의 급속한 발전으로 영상 컨텐츠 및 인터넷을 사용하는 인구가 증가하고 있는 추세인데, 영상 컨텐츠 및 인터넷을 통해 제공되는 정보에는 글자가 이미지화된 이미지 정보가 다량 존재하며, 이미지 정보는 컴퓨터의 모니터 화면으로 출력되어 사용자에게 제공되어진다. 그리고 다양한 이미지 정보를 디지털 문서의 형태로 제작하여 중요 자료 및 문서들의 훼손을 막고 보관비용을 줄이거나 영상 내에 포함된 자막 등의 글자를 추출하여 편집 가능한 문서의 형태로 만드는 경우가 증가하고 있다. 이에 따라, 이미지로부터 글자를 추출하는 기술이 발전되고 있고, 추출된 글자를 복사, 저장, 편집, 인쇄하거나 멀티미디어 컨텐츠 분야 및 다양한 시스템의 제어에 이용하기도 한다. 그런 기술 중의 하나로는 광학 문자 판독(OCR : Optical Character Recognition) 기술이 있다.Recently, due to the rapid development of the multimedia field and communication technology, the population using the video contents and the Internet is increasing.In the information provided through the video contents and the Internet, there is a large amount of image information imaged with letters, and the image information is a computer. It is output to the monitor screen and provided to the user. In addition, a variety of image information is produced in the form of digital documents to prevent damage to important materials and documents, reduce the storage costs, or extract the characters such as subtitles included in the image to form an editable document. Accordingly, technology for extracting text from an image is being developed, and the extracted text may be copied, stored, edited, printed, or used for controlling multimedia content and various systems. One such technique is Optical Character Recognition (OCR).

일반적으로 OCR 기술을 이용하는 것은 스캐너로 문서 등을 스캔하고, OCR 프로그램을 이용하여 한 글자씩 분석하며, 일반적인 데이터 처리가 가능하도록 글자 이미지를 아스키(ASCII : American Standard Code for Information Interchange)와 같은 문자코드로 번역하는 등의 작업들이 수반된다.In general, OCR technology is used to scan documents with a scanner, analyze characters one by one using an OCR program, and character code such as ASCII (American Standard Code for Information Interchange) to enable general data processing. Work involves translating into the

한편, 산업용 생산 설비 및 컴퓨터 기반의 많은 장치들에 대한 자동 제어의 요구가 증가하고 있고, 기존에 자동화에 대한 기술의 미비로 자동화 시스템이 적용이 안된 시스템에 자동제어 기술을 적용하는 수요가 늘어나고 있다.On the other hand, the demand for automatic control of many industrial production equipment and computer-based devices is increasing, and the demand for applying automatic control technology to systems that are not applied to the automation system is increasing due to the lack of the technology for automation. .

그런데 현재 일반적으로 사용되는 OCR 기술은 자동화 시스템에 적용하기가 쉽지 않다. 자동화 시스템에 따라서는 단순히 업그레이드를 통해 자동화 기능을 추가할 수 있는 경우도 있지만, 추가하지 못하는 경우가 많고, 때에 따라서는 시스템의 구조자체를 개선하여야 하는 경우도 발생할 수 있다.However, the current OCR technology is not easy to apply to the automation system. Depending on the automation system, it may be possible to add an automation function by simply upgrading, but in many cases, it may not be possible, and in some cases, the structure itself of the system may need to be improved.

본 발명은 상술한 문제점을 해결하기 위한 것으로, 산업용 설비 시스템에 사용되는 컴퓨터 자체에 어떠한 소프트웨어나 하드웨어의 추가 없이 모니터 화면으로 출력되는 글자정보를 가져올 수 있는 장치 및 방법을 제공하는데 그 목적이 있다.SUMMARY OF THE INVENTION The present invention has been made in view of the above-described problems, and an object thereof is to provide an apparatus and a method for bringing character information output on a monitor screen without adding any software or hardware to a computer itself used in an industrial facility system.

이러한 목적을 달성하기 위하여 본 발명은, 영상 신호를 출력하는 장치로부터 영상 신호가 입력되는 신호입력부; 상기 신호입력부로 입력되는 영상 신호를 해석하는 신호해석부; 상기 신호해석부에 의해 해석된 정보로부터 글자정보를 인식하는 글자인식처리부; 및 상기 글자인식처리부에 의해 인식된 글자정보를 출력하는 글자출력부; 를 포함하는 것을 특징으로 하는 영상 신호를 이용한 모니터 화면 인식장치를 제공한다.In order to achieve the above object, the present invention provides a signal input unit for inputting a video signal from a device for outputting a video signal; A signal analyzer which analyzes an image signal input to the signal input unit; A character recognition processor for recognizing character information from the information interpreted by the signal analysis unit; And a character output unit for outputting character information recognized by the character recognition processing unit. It provides a monitor screen recognition apparatus using a video signal comprising a.

그리고 상기 글자인식처리부는, 상기 신호해석부에 의해 해석된 정보로 모니터의 화면과 동일한 화면이미지를 구성하는 화면구성수단; 상기 화면구성수단에 의해 구성된 화면이미지에서 배경영역을 제거하고, 글자영역만을 추출하는 글자영역추출수단; 및 상기 글자영역추출수단에 의해 추출된 글자영역을 글자정보로 인식하는 글자인식수단; 을 포함하는 것을 특징으로 하는 영상 신호를 이용한 모니터 화면 인식장치를 제공한다.And the character recognition processing unit comprises: screen configuration means for constructing the same screen image as the screen of the monitor with the information interpreted by the signal analysis unit; Text area extraction means for removing a background area from the screen image configured by the screen configuration means and extracting only the text area; Character recognition means for recognizing the character area extracted by the character area extraction means as character information; It provides a monitor screen recognition apparatus using a video signal comprising a.

또한, 상기 신호입력부로 입력되는 영상 신호가 아날로그인 경우 디지털로 변환하는 디지털변환부; 를 더 포함하는 것을 특징으로 하는 영상 신호를 이용한 모니터 화면 인식장치를 제공한다.In addition, when the image signal input to the signal input unit is an analog digital conversion unit for converting to digital; It provides a monitor screen recognition apparatus using a video signal characterized in that it further comprises.

한편, 상기 글자출력부에서 출력되는 글자정보는 아스키(ASCII : American Standard Code for Information Interchange)코드로 출력되는 것을 특징으로 하는 영상 신호를 이용한 모니터 화면 인식장치를 제공한다.On the other hand, the character information output from the character output unit provides an apparatus for recognizing a monitor screen using an image signal, characterized in that the output as ASCII (ASCII: American Standard Code for Information Interchange) code.

영상 신호를 출력하는 장치로부터 영상 신호가 입력되는 신호입력단계; 상기 신호입력단계에서 입력되는 영상 신호를 해석하는 신호해석단계; 상기 신호해석단계에서 해석된 정보로부터 글자정보를 인식하는 글자인식처리단계; 및 상기 글자인식처리단계에서 인식된 글자정보를 출력하는 글자출력단계; 를 포함하는 것을 특징으로 하는 영상 신호를 이용한 모니터 화면 인식방법을 제공한다.A signal input step of inputting a video signal from an apparatus for outputting a video signal; A signal analysis step of analyzing the video signal input in the signal input step; A character recognition processing step of recognizing character information from the information interpreted in the signal analysis step; And a character output step of outputting character information recognized in the character recognition processing step. It provides a monitor screen recognition method using an image signal comprising a.

그리고 상기 글자인식처리단계는, 상기 신호해석단계에서 해석된 정보로 모니터의 화면과 동일한 화면이미지를 구성하는 화면구성단계; 상기 화면구성단계에서 구성된 화면이미지에서 배경영역을 제거하고, 글자영역만을 추출하는 글자영역추출단계; 및 상기 글자영역추출단계에서 추출된 글자영역을 글자정보로 인식하는 글자인식단계; 를 포함하는 것을 특징으로 하는 영상 신호를 이용한 모니터 화면 인식방법을 제공한다.And the character recognition processing step comprises: a screen configuration step of constructing the same screen image as the screen of the monitor with the information interpreted in the signal interpretation step; A text area extraction step of removing a background area from the screen image configured in the screen configuration step and extracting only a text area; And a character recognition step of recognizing the character region extracted in the character region extraction step as character information. It provides a monitor screen recognition method using an image signal comprising a.

또한, 상기 신호입력단계에서 입력되는 영상 신호가 아날로그인 경우 디지털로 변환하는 디지털변환단계; 를 더 포함하는 것을 특징으로 하는 영상 신호를 이용한 모니터 화면 인식방법을 제공한다.In addition, the digital conversion step of converting the image signal input in the signal input step to the digital if the analog; It provides a monitor screen recognition method using a video signal characterized in that it further comprises.

한편, 상기 글자출력단계에서 출력되는 글자정보는 아스키코드로 출력되는 것을 특징으로 하는 영상 신호를 이용한 모니터 화면 인식방법을 제공한다.On the other hand, the character information output in the character output step provides a monitor screen recognition method using an image signal, characterized in that the output as ASCII code.

이상에서 설명한 바와 같이 본 발명에 의하면, 모니터 화면으로 출력되는 글자정보를 자동으로 취득하여 이를 시스템의 제어 및 자동화 하는 수단으로 활용할 수 있다는 효과가 있다.As described above, according to the present invention, the character information output on the monitor screen can be automatically acquired and used as a means for controlling and automating the system.

이하, 본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 우선 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. First of all, in adding reference numerals to the components of each drawing, it should be noted that the same reference numerals are used as much as possible even if displayed on different drawings. In addition, in describing the present invention, when it is determined that the detailed description of the related well-known configuration or function may obscure the gist of the present invention, the detailed description thereof will be omitted.

<시스템에 대한 설명><Description of the system>

도1은 본 발명의 일실시예에 따른 영상 신호를 이용한 모니터 화면 인식장치가 산업용 설비에 설치된 시스템을 도시한 블록도이다.1 is a block diagram illustrating a system in which a monitor screen recognition apparatus using a video signal according to an embodiment of the present invention is installed in an industrial facility.

도1을 참고하면, 영상 신호를 이용한 모니터 화면 인식 시스템은 산업용 설비(100)의 설비제어장치(110) 내에 구비되어 영상 신호를 출력하는 그래픽카드(112), 그래픽카드(112)로부터 출력되는 영상 신호가 입력되는 모니터(200) 및 인식장치(300)를 포함하여 구성된다.Referring to FIG. 1, a monitor screen recognition system using a video signal is provided in a facility control apparatus 110 of an industrial facility 100 and outputs a video signal to a graphics card 112 and an image output from the graphics card 112. It is configured to include a monitor 200 and a recognition device 300 is a signal input.

인식장치(300)는 신호입력부(310), 신호해석부(320), 글자인식처리부(340) 및 글자출력부(350)로 이루어진다.The recognition apparatus 300 includes a signal input unit 310, a signal analysis unit 320, a character recognition processor 340, and a character output unit 350.

신호입력부(310)는 그래픽카드(112)의 영상 신호 출력으로부터 영상 신호가 입력된다. 이때, 영상 신호를 출력하는 장치로는 TV, 컴퓨터 그래픽카드(VGA, CGA, EGA) 등을 포함할 수 있다.The signal input unit 310 receives an image signal from the image signal output of the graphics card 112. In this case, a device for outputting an image signal may include a TV, a computer graphics card (VGA, CGA, EGA).

신호해석부(320)는 신호입력부(310)로 입력되는 영상 신호를 해석한다.The signal analyzer 320 analyzes an image signal input to the signal input unit 310.

글자인식처리부(340)는 신호해석부(320)에 의해 해석된 정보로부터 글자정보를 인식하고, 화면구성수단(342), 글자영역추출수단(344) 및 글자인식수단(346)을 포함한다.The character recognition processing unit 340 recognizes the character information from the information interpreted by the signal analysis unit 320, and includes a screen configuration means 342, a character area extraction means 344, and a character recognition means 346.

화면구성수단(342)은 신호해석부(320)에 의해 해석된 정보로 모니터(200)의 화면과 동일한 화면이미지를 구성한다.The screen configuration means 342 configures the same screen image as the screen of the monitor 200 by the information analyzed by the signal analysis unit 320.

글자영역추출수단(344)은 화면구성수단(342)에 의해 구성된 화면이미지에서 글자영역만을 추출한다.The text area extraction means 344 extracts only the text area from the screen image configured by the screen configuration means 342.

글자인식수단(346)은 글자영역추출수단(344)에 의해 추출된 글자영역을 글자정보로 인식한다.The character recognition means 346 recognizes the character region extracted by the character region extraction means 344 as character information.

글자출력부(350)는 글자인식처리부(340)에 의해 인식된 글자정보를 출력한다.The character output unit 350 outputs the character information recognized by the character recognition processing unit 340.

그래픽카드(112)에서 모니터(200)로 입력되는 영상 신호에서 자동으로 화면 정보를 받아 비트맵 형태의 이미지를 생성한 다음 글자정보를 인식하여 출력하는 시스템이다. 이때, 인식장치(300)는 디지털의 영상 신호를 입력으로 받아 화면이미지로 재구성하고, 구성된 화면이미지에서 배경영역과 글자영역을 구분한다. 그리고 배경영역을 제거하고 글자영역만을 추출하며, 이를 글자정보의 형태로 인식해서 출력하는 과정을 거친다.It is a system for automatically receiving screen information from an image signal input from the graphics card 112 to the monitor 200 to generate a bitmap-type image, and then recognizing and outputting character information. In this case, the recognition apparatus 300 receives a digital image signal as an input, reconstructs it into a screen image, and distinguishes a background region and a text region from the configured screen image. Then, the background area is removed, only the text area is extracted, and the text is recognized and displayed in the form of text information.

즉, 인식장치(300)는 설비제어장치(110)의 그래픽카드(112)에서 모니터(200)로 입력되는 영상 신호에서 화면 정보를 받는다. 그리고 인식장치(300)로부터 화면의 글자정보가 자동화 장치(500)로 입력되고, 자동화 장치(500)에서 설비제어 신호가 출력되어 산업용 설비(100)로 입력되는 과정을 거친다. 이때, 자동화 장치(500)는 입력된 화면의 글자정보 중 산업용 설비(100)를 제어하는데 필요한 정보를 추출하여 출력한다.That is, the recognition apparatus 300 receives screen information from an image signal input from the graphic card 112 of the facility control apparatus 110 to the monitor 200. Then, the character information of the screen from the recognition device 300 is input to the automation device 500, the facility control signal is output from the automation device 500 is input to the industrial facility (100). At this time, the automation device 500 extracts and outputs information necessary for controlling the industrial facility 100 among the character information of the input screen.

즉, 설비제어장치(110)의 영상 신호 출력을 인식장치(300)에 입력하여 인식된 결과인 화면의 글자정보를 활용함으로써, 산업용 설비(100)를 제어하는 자동화 시스템의 구축이 가능하다. 또한, 산업용 설비(100)의 설비제어장치(110) 및 제어방법은 설비의 종류에 따라 달라지며, 별도로 구성되는 것이 바람직하다.That is, by inputting the video signal output of the facility control device 110 to the recognition device 300 by utilizing the character information of the screen that is the result of the recognition, it is possible to build an automation system for controlling the industrial facility 100. In addition, the facility control device 110 and the control method of the industrial facility 100 depends on the type of the facility, it is preferable that it is configured separately.

여기서, 신호입력부(310)로 입력되는 영상 신호가 아날로그인 경우에는 디지털로 변환하는 디지털변환부(330)를 더 포함한다. 따라서, 인식장치(300)에 입력되는 영상 신호는 DVI, HDMI 등의 디지털 신호뿐만 아니라 Composite, Component 등의 아날로그 신호도 가능하다.Here, when the image signal input to the signal input unit 310 is an analog further includes a digital converter 330 for converting to digital. Accordingly, the video signal input to the recognition device 300 may be analog signals such as composite and component as well as digital signals such as DVI and HDMI.

한편, 글자정보의 인식은 일반적으로 두 영상을 비교하여 두 영상이 특정한 기준을 토대로 서로 비슷한가를 판정하는 패턴 매칭(Pattern Matching) 방식을 적 용하여 구성되고, 화면 표시에 사용되는 글자의 특성에 맞게 개발함으로써 인식률을 높이는 것이 바람직하다.On the other hand, the recognition of character information is generally composed by applying a pattern matching method that compares two images to determine whether two images are similar to each other based on a specific criterion, and is developed in accordance with the characteristics of the characters used for screen display. It is desirable to increase the recognition rate by doing so.

상기와 같은 시스템의 구성으로, 산업용 설비(100)와 연결되어 사용되는 모니터(200)의 외부에 인식장치(300)를 연결하는 것만으로 모니터(200)의 화면에 보이는 글자를 자동으로 인식하여 출력하는 것이 가능하다. 즉, 산업용 설비(100) 시스템에 사용되는 컴퓨터 자체에 별도의 소프트웨어나 하드웨어의 추가 없이 영상 출력 단자에 인식장치(300)를 연결함으로써, 시스템에 어떠한 영향도 없이 시스템의 정보를 취득할 수 있다.With the configuration of the system as described above, only by connecting the recognition device 300 to the outside of the monitor 200 used in connection with the industrial facility 100 automatically recognizes the characters displayed on the screen of the monitor 200 and outputs It is possible to do That is, by connecting the recognition device 300 to the image output terminal without the addition of additional software or hardware to the computer itself used in the industrial facility 100 system, it is possible to obtain the information of the system without any effect on the system.

한편, 글자출력부(350)에 의해 출력되는 글자정보는 아스키(ASCII : American Standard Code for Information Interchange)코드로 출력이 되므로 글자의 크기나 글자체에 관계없이 가능하고, 자동화 시스템의 구성이 가능하다. 즉, 산업용 설비(100) 외에 서버 시스템 등 다양한 컴퓨터 시스템으로 사용되는 경우 이를 외부에서 제어할 수 있기 때문에 모니터링 및 자동화 하는 수단으로 활용이 가능하다.On the other hand, the character information output by the character output unit 350 is output as ASCII (ASCII: American Standard Code for Information Interchange) code is possible regardless of the size or font of the character, it is possible to configure the automation system. That is, when used in a variety of computer systems, such as server systems in addition to the industrial facility 100 can be used as a means for monitoring and automation because it can be controlled from the outside.

도2는 인식장치를 이용하여 글자정보를 출력하는 일예를 도시한 이미지이다.2 is an image showing an example of outputting character information using a recognition device.

도2를 참조하면, 인식장치(300)는 그림과 같은 화면이미지에서 배경영역을 제외하고 글자영역을 추출해서, BCR1, BCR2, Lot ID, Recipe, Batch ID 등의 값뿐만 아니라, 각종 글자 기반의 Data(온도, 압력, 전압, 전류 등)를 취합하여 인식할 수 있으며, 이를 산업용 설비(100)를 제어하는 수단으로 사용한다. 여기서, 화면이미지 영역 중 특정한 영역만을 대상으로도 글자정보를 인식할 수 있어 신뢰성 있는 제어가 가능하다.Referring to FIG. 2, the recognition apparatus 300 extracts a text area excluding a background area from a screen image as shown in the figure, and not only values such as BCR1, BCR2, Lot ID, Recipe, Batch ID, etc. Data (temperature, pressure, voltage, current, etc.) can be collected and recognized, and used as a means for controlling the industrial facility 100. Here, the character information can be recognized even in a specific area of the screen image area, thereby enabling reliable control.

또한, 본 발명의 일실시예에서는 인식장치(300)를 산업용으로 국한하지 않고, 모니터(200)로 출력되는 다양한 종류의 정보를 자동으로 취득할 수 있는 발명으로 일반화 할 수 있다. 일예로, 인식장치(300)를 특정 PC에서 사용하는 프로그램(업무용 프로그램, 인터넷 검색, 문서 편집 등)의 사용 패턴을 분석하거나 통계를 작성하는 수단, 보안 등의 목적으로 시스템을 감시하는 수단 및 프로그램의 오류를 자동으로 감시하는 수단 등으로도 활용이 가능하다.In addition, in an embodiment of the present invention, the recognition apparatus 300 may be generalized to an invention that is capable of automatically acquiring various types of information output to the monitor 200 without being limited to the industrial. For example, a means and program for monitoring the system for the purpose of analyzing the usage pattern of the program (business program, Internet search, document editing, etc.) using the recognition device 300 on a specific PC or writing statistics, security, etc. It can also be used as a means to automatically monitor errors.

<방법에 대한 설명><Description of the method>

상기한 바와 같은 시스템을 가지는 도1의 영상 신호를 이용한 모니터 화면 인식방법에 대하여 도3의 흐름도를 참조하여 설명하되, 편의상 순서를 붙여 설명한다.A monitor screen recognition method using the video signal of FIG. 1 having the system as described above will be described with reference to the flowchart of FIG.

1. 신호입력단계<S310>1.Signal input step <S310>

산업용 설비(100)의 설비제어장치(110)내에 구비된 그래픽카드(112)로부터 출력되는 영상 신호가 신호입력부(310)로 입력된다. 이때, 영상 신호를 출력하는 장치로는 TV, 그래픽카드(VGA, CGA, EGA) 등을 포함할 수 있다.The video signal output from the graphics card 112 provided in the facility control apparatus 110 of the industrial facility 100 is input to the signal input unit 310. In this case, the device for outputting the video signal may include a TV, graphics cards (VGA, CGA, EGA) and the like.

2. 신호해석단계<S320>2. Signal analysis step <S320>

신호해석부(320)는 신호입력부(310)로 입력되는 영상 신호를 해석한다.The signal analyzer 320 analyzes an image signal input to the signal input unit 310.

3. 디지털변환단계<S330>3. Digital conversion step <S330>

신호입력부(310)로 입력되는 영상 신호가 아날로그인 경우에는 디지털변환 부(330)에 의해 디지털 신호로 변환된다.When the image signal input to the signal input unit 310 is an analog, it is converted into a digital signal by the digital converter 330.

4. 글자인식처리단계<S340>4. Character recognition processing step <S340>

글자인식처리부(340)는 신호해석부(320)에 의해 해석된 정보로부터 글자정보를 인식한다.The character recognition processing unit 340 recognizes the character information from the information interpreted by the signal analysis unit 320.

4-1. 화면구성단계<S342>4-1. Screen composition step <S342>

화면구성수단(342)은 신호해석부(320)에 의해 해석된 정보로 모니터(200)의 화면과 동일한 화면이미지를 구성한다.The screen configuration means 342 configures the same screen image as the screen of the monitor 200 by the information analyzed by the signal analysis unit 320.

4-2. 글자영역추출단계<S344>4-2. Character area extraction step <S344>

글자영역추출수단(344)은 화면구성수단(342)에 의해 구성된 화면이미지에서 배경영역을 제거하고, 글자영역만을 추출한다.The text area extraction means 344 removes the background area from the screen image configured by the screen configuration means 342, and extracts only the text area.

4-3. 글자인식단계<S346>4-3. Letter recognition step <S346>

글자인식수단(346)은 글자영역추출수단(344)에 의해 추출된 글자영역을 글자정보로 인식한다.The character recognition means 346 recognizes the character region extracted by the character region extraction means 344 as character information.

5. 글자출력단계<S350>5. Character output step <S350>

글자출력부(350)는 글자인식처리부(340)에 의해 인식된 글자정보를 출력한다.The character output unit 350 outputs the character information recognized by the character recognition processing unit 340.

즉, 인식장치(300)가 산업용 설비(100)에 사용되어 설비제어장치(110)에서 모니터(200)로 입력되는 영상 신호에서 화면 정보를 받고, 인식장치(300)에서 출력되는 화면의 글자정보가 자동화 장치(500)로 입력된다. 그리고 자동화 장치(500)에서 출력되는 설비제어 신호가 산업용 설비(100)로 입력되는 단계를 거친다.That is, the recognition device 300 is used in the industrial facility 100 to receive the screen information from the image signal input from the facility control device 110 to the monitor 200, the character information of the screen output from the recognition device 300 Is input to the automation device 500. In addition, the facility control signal output from the automation device 500 is input to the industrial facility 100.

여기서, 글자출력단계에서 출력되는 글자정보는 아스키코드로 출력이 되므로 글자의 크기나 글자체에 관계없이 가능하다. 그리고 화면이미지 영역 중 특정한 영역만을 대상으로도 글자정보 추출이 가능하여서 신뢰성 있는 제어가 가능하다.Here, the character information output in the character output step is output as an ASCII code, so it is possible regardless of the size or font of the character. In addition, the character information can be extracted even in a specific area of the screen image area, thereby enabling reliable control.

이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.The above description is merely illustrative of the technical idea of the present invention, and those skilled in the art to which the present invention pertains may make various modifications and changes without departing from the essential characteristics of the present invention. Therefore, the embodiments disclosed in the present invention are not intended to limit the technical idea of the present invention but to describe the present invention, and the scope of the technical idea of the present invention is not limited by these embodiments. The protection scope of the present invention should be interpreted by the following claims, and all technical ideas within the equivalent scope should be interpreted as being included in the scope of the present invention.

도1은 본 발명의 일실시예에 따른 영상 신호를 이용한 모니터 화면 인식장치가 산업용 설비에 설치된 시스템을 도시한 블록도이다.1 is a block diagram illustrating a system in which a monitor screen recognition apparatus using a video signal according to an embodiment of the present invention is installed in an industrial facility.

도2는 인식장치를 이용하여 글자정보를 출력하는 일예를 도시한 이미지이다.2 is an image showing an example of outputting character information using a recognition device.

도3은 본 발명의 일실시예에 따른 영상 신호를 이용한 모니터 화면 인식방법을 도시한 흐름도이다.3 is a flowchart illustrating a method of recognizing a monitor screen using an image signal according to an embodiment of the present invention.

<도면의 주요 부분에 대한 부호의 설명><Explanation of symbols for the main parts of the drawings>

100 : 산업용 설비 110 : 설비제어장치100: industrial equipment 110: equipment control device

112 : 그래픽카드 200 : 모니터112: graphics card 200: monitor

300 : 인식장치300: recognition device

310 : 신호입력부 320 : 신호해석부310: signal input unit 320: signal analysis unit

330 : 디지털변환부 340 : 글자인식처리부330: digital conversion unit 340: character recognition processing unit

342 : 화면구성수단 344 : 글자영역추출수단342: screen configuration means 344: character area extraction means

346 : 글자인식수단346: letter recognition means

350 : 글자출력부350: character output unit

500 : 자동화 장치500: automation device

Claims (8)

산업용 설비를 제어하는 설비제어장치에 포함되고, 상기 설비제어장치의 상태에 대한 영상신호를 출력하는 그래픽카드;A graphics card included in a facility control device for controlling an industrial facility and outputting a video signal of a state of the facility control device; 상기 그래픽카드에서 출력되는 영상신호가 입력되어, 입력된 영상신호에서 글자정보를 추출하는 인식장치;A recognition device for inputting a video signal output from the graphic card and extracting character information from the input video signal; 상기 인식장치에서 추출된 글자정보를 바탕으로 설비제어 신호를 생성하고, 생성된 설비제어신호를 상기 산업용 설비로 전송하는 자동화 장치; 를 포함하고,An automation device for generating a facility control signal based on the character information extracted from the recognition device and transmitting the generated facility control signal to the industrial facility; Including, 상기 인식장치는,The recognition device, 영상 신호를 출력하는 장치로부터 영상 신호가 입력되는 신호입력부;A signal input unit to which a video signal is input from an apparatus for outputting a video signal; 상기 신호입력부로 입력되는 영상 신호를 해석하는 신호해석부;A signal analyzer which analyzes an image signal input to the signal input unit; 상기 신호해석부에 의해 해석된 정보로부터 글자정보를 인식하는 글자인식처리부; 및A character recognition processor for recognizing character information from the information interpreted by the signal analysis unit; And 상기 글자인식처리부에 의해 인식된 글자정보를 출력하는 글자출력부; 를 포함하는 것을 특징으로 하는 영상 신호를 이용한 산업용 자동화 시스템.A character output unit which outputs character information recognized by the character recognition processing unit; Industrial automation system using a video signal comprising a. 제1항에 있어서,The method of claim 1, 상기 글자인식처리부는,The letter recognition processing unit, 상기 신호해석부에 의해 해석된 정보로 모니터의 화면과 동일한 화면이미지를 구성하는 화면구성수단;Screen configuration means for constructing the same screen image as the screen of the monitor with the information analyzed by the signal analysis unit; 상기 화면구성수단에 의해 구성된 화면이미지에서 배경영역을 제거하고, 글자영역만을 추출하는 글자영역추출수단; 및Text area extraction means for removing a background area from the screen image configured by the screen configuration means and extracting only the text area; And 상기 글자영역추출수단에 의해 추출된 글자영역을 글자정보로 인식하는 글자인식수단; 을 포함하는 것을 특징으로 하는 영상 신호를 이용한 산업용 자동화 시스템.Character recognition means for recognizing the character region extracted by the character region extraction means as character information; Industrial automation system using a video signal comprising a. 제1항에 있어서,The method of claim 1, 상기 인식장치는,The recognition device, 상기 신호입력부로 입력되는 영상 신호가 아날로그인 경우 디지털로 변환하는 디지털변환부; 를 더 포함하는 것을 특징으로 하는 영상 신호를 이용한 산업용 자동화 시스템.A digital conversion unit converting the image signal input to the signal input unit into digital when the image signal is analog; Industrial automation system using a video signal characterized in that it further comprises. 제1항에 있어서,The method of claim 1, 상기 글자출력부에서 출력되는 글자정보는 아스키(ASCII : American Standard Code for Information Interchange)코드로 출력되는 것을 특징으로 하는 영상 신호를 이용한 산업용 자동화 시스템.Character information output from the character output unit is an industrial automation system using a video signal, characterized in that output as ASCII (ASCII: American Standard Code for Information Interchange) code. 영상신호를 출력하는 장치로부터 영상 신호가 입력되는 신호입력단계;A signal input step of inputting a video signal from an apparatus for outputting a video signal; 상기 신호입력단계에서 입력되는 영상 신호를 해석하는 신호해석단계;A signal analysis step of analyzing the video signal input in the signal input step; 상기 신호해석단계에서 해석된 정보로부터 글자정보를 인식하는 글자인식처리단계;A character recognition processing step of recognizing character information from the information interpreted in the signal analysis step; 상기 글자인식처리단계에서 인식된 글자정보를 출력하는 글자출력단계; 및A character output step of outputting character information recognized in the character recognition processing step; And 상기 글자출력단계에서 출력된 글자정보가 자동화 장치로 입력되고, 자동화 장치에서 출력되는 설비제어 신호가 산업용 설비로 입려되는 설비제어 신호 입력단계; 를 포함하는 것을 특징으로 하는 영상 신호를 이용한 산업용 자동화 방법.Facility control signal input step of inputting the character information output in the character output step into the automation device, the facility control signal output from the automation device to the industrial facility; Industrial automation method using a video signal comprising a. 제5항에 있어서,The method of claim 5, 상기 글자인식처리단계는,The letter recognition processing step, 상기 신호해석단계에서 해석된 정보로 모니터의 화면과 동일한 화면이미지를 구성하는 화면구성단계;A screen configuration step of constructing the same screen image as the screen of the monitor with the information analyzed in the signal analysis step; 상기 화면구성단계에서 구성된 화면이미지에서 배경영역을 제거하고, 글자영역만을 추출하는 글자영역추출단계; 및A text area extraction step of removing a background area from the screen image configured in the screen configuration step and extracting only a text area; And 상기 글자영역추출단계에서 추출된 글자영역을 글자정보로 인식하는 글자인식단계; 를 포함하는 것을 특징으로 하는 영상 신호를 이용한 산업용 자동화 방법.A character recognition step of recognizing the character area extracted in the character area extraction step as character information; Industrial automation method using a video signal comprising a. 제5항에 있어서,The method of claim 5, 상기 신호입력단계에서 입력되는 영상 신호가 아날로그인 경우 디지털로 변환하는 디지털변환단계; 를 더 포함하는 것을 특징으로 하는 영상 신호를 이용한 산업용 자동화 방법.A digital conversion step of converting the video signal input in the signal input step into digital when it is analog; Industrial automation method using a video signal characterized in that it further comprises. 제5항에 있어서,The method of claim 5, 상기 글자출력단계에서 출력되는 글자정보는 아스키코드로 출력되는 것을 특징으로 하는 영상 신호를 이용한 산업용 자동화 방법.Character information output in the character output step is an industrial automation method using a video signal, characterized in that the output as ASCII code.
KR1020080064692A 2008-07-04 2008-07-04 Industrial automation system and method using image signal KR100887659B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080064692A KR100887659B1 (en) 2008-07-04 2008-07-04 Industrial automation system and method using image signal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080064692A KR100887659B1 (en) 2008-07-04 2008-07-04 Industrial automation system and method using image signal

Publications (1)

Publication Number Publication Date
KR100887659B1 true KR100887659B1 (en) 2009-03-11

Family

ID=40697885

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080064692A KR100887659B1 (en) 2008-07-04 2008-07-04 Industrial automation system and method using image signal

Country Status (1)

Country Link
KR (1) KR100887659B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101065299B1 (en) * 2009-05-27 2011-09-16 가톨릭대학교 산학협력단 System and method for processing medical image and processing information about medical device in medical image
KR101655706B1 (en) * 2015-11-24 2016-09-07 남규태 Remote management system using transcoding technique

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070046414A (en) * 2005-10-31 2007-05-03 (주)에스디마이크로텍 Apparatus and method for detecting on-screen display information

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070046414A (en) * 2005-10-31 2007-05-03 (주)에스디마이크로텍 Apparatus and method for detecting on-screen display information

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101065299B1 (en) * 2009-05-27 2011-09-16 가톨릭대학교 산학협력단 System and method for processing medical image and processing information about medical device in medical image
KR101655706B1 (en) * 2015-11-24 2016-09-07 남규태 Remote management system using transcoding technique

Similar Documents

Publication Publication Date Title
CN110852065B (en) Document auditing method, device, system, equipment and storage medium
CN110942074B (en) Character segmentation recognition method and device, electronic equipment and storage medium
US8155945B2 (en) Image processing apparatus, image processing method, computer-readable medium and computer data signal
US8571359B2 (en) Image processing device, method and storage medium for storing and displaying an electronic document
CN101944179A (en) Image processing apparatus and image processing method
US20230061398A1 (en) Method and device for training, based on crossmodal information, document reading comprehension model
Chester et al. Getting computers to see information graphics so users do not have to
KR101986288B1 (en) Apparatus and method for text-to-speech conversion of table data on electronic document
RU2605078C2 (en) Image segmentation for data verification
KR100887659B1 (en) Industrial automation system and method using image signal
CN105551044A (en) Picture comparing method and device
CN101901341B (en) Method and equipment for extracting raster image from transportable electronic document
US9773472B2 (en) Text extraction from graphical user interface content
CN116204421A (en) Test case generation method and device, storage medium and computer equipment
CN103455808B (en) The dispensing device of machine character read code and coded method
CN115130437A (en) Intelligent document filling method and device and storage medium
CN113038184A (en) Data processing method, device, equipment and storage medium
US11182635B2 (en) Terminal apparatus, character recognition system, and character recognition method
CN114241496A (en) Pre-training model training method and device for reading task and electronic equipment thereof
KR20080002084A (en) System and method for optical character recognition
CN114328242B (en) Form testing method and device, electronic equipment and medium
KR101561673B1 (en) Method for translating text in document using cloud system and recording-medium recorded program thereof
Rai et al. MyOcrTool: visualization system for generating associative images of Chinese characters in smart devices
Singla et al. Extract the punjabi word with edge detector from machine printed document images
CN111210455B (en) Method and device for extracting preprinted information in image, medium and electronic equipment

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130221

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20131217

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20150225

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20160122

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20180226

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20190227

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20200226

Year of fee payment: 12