KR102453132B1 - Apparatus and method for providing optimun photographing range using result of quality analyzation - Google Patents

Apparatus and method for providing optimun photographing range using result of quality analyzation Download PDF

Info

Publication number
KR102453132B1
KR102453132B1 KR1020200088729A KR20200088729A KR102453132B1 KR 102453132 B1 KR102453132 B1 KR 102453132B1 KR 1020200088729 A KR1020200088729 A KR 1020200088729A KR 20200088729 A KR20200088729 A KR 20200088729A KR 102453132 B1 KR102453132 B1 KR 102453132B1
Authority
KR
South Korea
Prior art keywords
shooting
photographing
range
value
angle
Prior art date
Application number
KR1020200088729A
Other languages
Korean (ko)
Other versions
KR20220010168A (en
Inventor
황희경
김성원
Original Assignee
(주)바질컴퍼니
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)바질컴퍼니 filed Critical (주)바질컴퍼니
Priority to KR1020200088729A priority Critical patent/KR102453132B1/en
Publication of KR20220010168A publication Critical patent/KR20220010168A/en
Application granted granted Critical
Publication of KR102453132B1 publication Critical patent/KR102453132B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H04N5/2257—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning

Abstract

본 발명은 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치 및 방법에 관한 것으로 본 발명의 일면에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치는 가속도 센서와 카메라를 포함하고 외부와 통신가능한 단말기로부터 물품을 촬영함에 따라 생성되는 촬영 이미지를 입력받는 촬영 이미지 입력부, 단말기로부터 촬영 이미지를 촬영한 시점에서의 가속도 센서값을 입력받는 센서값 입력부, 촬영 이미지를 입력받아 품질 불량 또는 품질 양호한지 구분 가능하도록 미리 학습된 학습 모델에 촬영 이미지를 적용함에 따라 품질 불량에 대응되는 제1 분류값 또는 품질 양호에 대응되는 제2 분류값을 선택하여 가속도 센서값과 매칭시키는 촬영각도 매칭부 및 기설정된 시간 동안 제1 분류값과 매칭되는 복수개의 촬영각도들에 기초하여 복수개의 촬영각도 범위를 생성하고, 제1 분류값과 매칭되는 복수개의 촬영각도들의 분포에 기초하여 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 촬영 범위 설정모듈을 포함한다.The present invention relates to an apparatus and method for providing an optimal shooting range using a quality analysis result, and an apparatus for providing an optimal shooting range using a quality analysis result according to an aspect of the present invention includes an acceleration sensor and a camera, and provides an article from a terminal capable of communicating with the outside. A photographed image input unit that receives a photographed image generated by photographing, a sensor value input portion that receives an acceleration sensor value at the time the photographed image is taken from the terminal, and a photographed image are received and learned in advance to distinguish between poor quality or good quality A photographing angle matching unit that selects a first classification value corresponding to poor quality or a second classification value that corresponds to good quality as the photographed image is applied to the trained learning model and matches the value of the acceleration sensor, and a first classification for a preset time A plurality of shooting angle ranges are generated based on the plurality of shooting angles matching the value, and any one of the plurality of shooting angle ranges is selected based on the distribution of the plurality of shooting angles matching the first classification value. and a shooting range setting module for setting an optimal shooting range.

Description

품질 분석 결과를 이용한 최적 촬영 범위 제공 장치 및 방법{APPARATUS AND METHOD FOR PROVIDING OPTIMUN PHOTOGRAPHING RANGE USING RESULT OF QUALITY ANALYZATION}Apparatus and method for providing optimal shooting range using quality analysis results

본 발명은 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치 및 방법에 관한 것으로, 더욱 상세하게는 공장 등 제조 현장에서 품질 관리를 수행하는데 있어서 불량품의 발견 가능성을 높일 수 있도록 하는 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치 및 방법에 관한 것이다.The present invention relates to an apparatus and method for providing an optimal shooting range using a quality analysis result, and more particularly, to an optimal shooting using a quality analysis result that increases the possibility of detecting defective products in performing quality control at a manufacturing site such as a factory. It relates to a range providing apparatus and method.

미국, 독일, 일본 등 제조 선진국들과 중국과 같은 제조 신흥국 등은 제조업 경쟁력 강화를 위해 스마트 공장, 산업 인터넷 등을 중심을 정책을 수립중이며, 세계 스마트 공장 시장 규모는 2016년 1,210억 달러에서 2022년 2,054달러에 이를 전망이다.Advanced manufacturing countries such as the United States, Germany, and Japan and emerging manufacturing countries such as China are establishing policies centered on smart factories and industrial internet to strengthen manufacturing competitiveness. It is expected to reach $2,054.

품질관리의 자동화 및 고속화를 위해 영상 취득 장치를 구비해 영상 취득 장치로부터 수집된 이미지를 딥러닝 기반으로 분석함에 따라 결함을 발견하는 품질관리기술 등이 개발되고 있다.In order to automate and speed up quality control, a quality control technology that detects defects is being developed by providing an image acquisition device and analyzing the images collected from the image acquisition device based on deep learning.

이러한 종래의 기술은 결함 판별 대상이 되는 부분을 균일하게 촬영하여 획득한 이미지를 이용하는 것으로, 이미지가 결함 판별 대상이 되는 부분을 포함하지 않는 경우를 고려하지 못한다.This conventional technique uses an image obtained by uniformly photographing a portion to be a defect determination target, and does not take into account a case in which the image does not include a portion subject to a defect determination.

즉, 종래의 기술들은 촬영 이미지가 균일하게 결함 판별 대상이 되는 부분을 포함하는 것을 가정하고 있어, 불량이 자주 발생하는 영역과 불량이 거의 발생하지 않는 영역이 특정되지 않은 상황에서 촬영 각도 등에 따라 불량이 거의 발생하지 않는 영역을 촬영하는 경우, 이미지 분석을 통한 품질 판단의 정확도가 떨어진다는 문제점이 있다.That is, the prior art assumes that the photographed image uniformly includes a portion that is a target for defect determination, so that the defect occurs depending on the photographing angle, etc. In the case of photographing an area in which this seldom occurs, there is a problem in that the accuracy of quality determination through image analysis is deteriorated.

대한민국 특허출원번호 제10-2017-0121326호Republic of Korea Patent Application No. 10-2017-0121326 대한민국 특허출원번호 제10-2018-0120853호Republic of Korea Patent Application No. 10-2018-0120853

본 발명의 목적은 상기 문제점을 해결하기 위한 것으로, 촬영 이미지를 학습 모델에 적용함에 따른 품질 분석 결과와 촬영각도를 이용하여 불량이 자주 발생되는 촬영각도 범위를 최적 촬영 범위로 제공하는 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치 및 방법을 제공하는 것이다.An object of the present invention is to solve the above problem, and the quality analysis result of providing the shooting angle range in which defects frequently occur as the optimal shooting range using the quality analysis result and the shooting angle according to the application of the shooting image to the learning model. It is to provide an apparatus and method for providing an optimal shooting range used.

본 발명의 목적은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 명확하게 이해될 수 있을 것이다.Objects of the present invention are not limited to the objects mentioned above, and other objects not mentioned will be clearly understood from the description below.

본 발명의 일면에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치는 가속도 센서와 카메라를 포함하고 외부와 통신가능한 단말기로부터 물품을 촬영함에 따라 생성되는 촬영 이미지를 입력받는 촬영 이미지 입력부, 단말기로부터 촬영 이미지를 촬영한 시점에서의 가속도 센서값을 입력받는 센서값 입력부, 가속도 센서값에 기초하여 촬영 이미지를 촬영한 시점에서 단말기의 기울기에 대응되는 촬영각도를 산출하는 촬영각도 산출부, 촬영 이미지를 입력받아 품질 불량 또는 품질 양호한지 구분 가능하도록 미리 학습된 학습 모델에 촬영 이미지를 적용함에 따라 품질 불량에 대응되는 제1 분류값 또는 품질 양호에 대응되는 제2 분류값을 선택하여 촬영각도와 매칭시키는 촬영각도 매칭부 및 기설정된 시간 동안 제1 분류값과 매칭되는 복수개의 촬영각도들에 기초하여 복수개의 촬영각도 범위를 생성하고, 제1 분류값과 매칭되는 복수개의 촬영각도들의 분포에 기초하여 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 촬영 범위 설정모듈을 포함한다. An apparatus for providing an optimal shooting range using a quality analysis result according to an aspect of the present invention includes an acceleration sensor and a camera, and a captured image input unit for receiving a captured image generated by photographing an article from a terminal capable of communicating with the outside, and a captured image from the terminal A sensor value input unit that receives an acceleration sensor value at the time of photographing, a photographing angle calculation unit that calculates a photographing angle corresponding to the inclination of the terminal at the point in time when the photographed image is photographed based on the acceleration sensor value, and receives the photographed image A shooting angle that matches the shooting angle by selecting the first classification value corresponding to the poor quality or the second classification value corresponding to the good quality as the shooting image is applied to the pre-trained learning model to distinguish whether the quality is poor or good quality A plurality of photographing angle ranges are generated based on the matching unit and the plurality of photographing angles matched with the first classification value for a preset time, and a plurality of photographing angles are generated based on the distribution of the plurality of photographing angles matched with the first classification value. and a shooting range setting module configured to set any one of the angle ranges as an optimal shooting range.

본 발명의 다른 면에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 방법은 가속도 센서와 카메라를 포함하고 외부와 통신가능한 단말기로부터 물품을 촬영함에 따라 생성되는 촬영 이미지와 가속도 센서값을 입력받는 단계, 가속도 센서값에 기초하여 촬영 이미지를 촬영한 시점에서 단말기의 기울기에 대응되는 촬영각도를 산출하는 단계, 촬영 이미지를 입력받아 품질 불량 또는 품질 양호한지 구분 가능하도록 미리 학습된 학습 모델에 촬영 이미지를 적용함에 따라 품질 불량에 대응되는 제1 분류값 또는 품질 양호에 대응되는 제2 분류값을 선택하여 촬영각도와 매칭시키는 단계, 기설정된 시간 동안 제1 분류값과 매칭되는 복수개의 촬영각도들을 수집하는 단계, 제1 분류값과 매칭되는 복수개의 촬영각도들 중 최댓값과 제1 분류값과 매칭되는 복수개의 촬영각도들 중 최솟값에 기초하여 복수개의 촬영각도 범위를 생성하는 단계 및 제1 분류값과 매칭되는 복수개의 촬영각도들의 분포에 기초하여 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 단계를 포함한다.According to another aspect of the present invention, a method for providing an optimal shooting range using a quality analysis result includes the steps of: receiving a captured image and an acceleration sensor value generated by photographing an article from a terminal that includes an acceleration sensor and a camera and can communicate with the outside; Calculating a shooting angle corresponding to the inclination of the terminal at the point of time when the captured image is captured based on the sensor value selecting a first classification value corresponding to poor quality or a second classification value corresponding to good quality according to the selection step and matching the photographing angle; collecting a plurality of photographing angles matching the first classification value for a preset time; generating a plurality of photographing angle ranges based on a maximum value among a plurality of photographing angles matching the first classification value and a minimum value among a plurality of photographing angles matching the first classification value; and a plurality of photographing angle ranges matching the first classification value. and setting any one of the plurality of photographing angle ranges as the optimal photographing range based on the distribution of the photographing angles.

본 발명에 따르면 촬영 이미지를 학습 모델에 적용함에 따른 품질 분석 결과와 촬영각도를 이용하여 촬영각도범위를 최적 촬영 범위로 제공하는 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치 및 방법을 제공하는 효과가 있다.According to the present invention, there is an effect of providing an apparatus and method for providing an optimal shooting range using a quality analysis result for providing a shooting angle range as an optimal shooting range using a quality analysis result and a shooting angle by applying a shot image to a learning model. .

품질 불량으로 판단된 촬영 이미지에 대한 촬영각도들의 분포를 이용하여 빈도가 높은, 즉 불량이 상대적으로 많이 검출되는 촬영각도 범위를 최적 촬영 범위로 제공하는 효과를 가진다.It has an effect of providing a shooting angle range with high frequency, ie, a relatively large number of defects, as an optimal shooting range by using the distribution of shooting angles for the captured images determined to be of poor quality.

이에 따라, 품질 양호로 판단된 촬영 이미지에 대한 촬영각도가 최적 촬영 범위에 속하지 않으면 재촬영을 요청하여, 촬영각도에 의해 감지되지 않은 품질 불량 물품을 재활영 이미지를 통해 발견하도록 하는 효과를 기재할 수 있다.Accordingly, if the photographing angle for the photographed image judged to be of good quality does not fall within the optimal photographing range, the effect of requesting re-photography and discovering the poor-quality goods not detected by the photographing angle through the recycle image will be described. can

본 발명의 효과는 상기에서 언급한 효과들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 청구범위의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The effects of the present invention are not limited to the above-mentioned effects, and other effects not mentioned will be clearly understood by those skilled in the art from the description of the claims.

도 1은 본 발명의 일 실시예에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치의 블록도이다.
도 2는 본 발명의 다른 실시예에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 방법의 순서도이다.1 is a block diagram of an apparatus for providing an optimal shooting range using a quality analysis result according to an embodiment of the present invention.
2 is a flowchart of a method for providing an optimal shooting range using a quality analysis result according to another embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것으로서, 본 발명은 청구항의 기재에 의해 정의될 뿐이다. 한편, 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며, 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다.Advantages and features of the present invention and methods of achieving them will become apparent with reference to the embodiments described below in detail in conjunction with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but will be implemented in various different forms, and only these embodiments allow the disclosure of the present invention to be complete, and those of ordinary skill in the art to which the present invention pertains. It is provided to fully inform the person of the scope of the invention, and the present invention is only defined by the description of the claims. On the other hand, the terms used in the present specification are for describing the embodiments, and are not intended to limit the present invention. In this specification, the singular also includes the plural unless specifically stated otherwise in the phrase.

도 1은 본 발명의 일 실시예에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치의 블록도이다.1 is a block diagram of an apparatus for providing an optimal shooting range using a quality analysis result according to an embodiment of the present invention.

도 1을 참조하면 본 발명의 일 실시예에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치(20)는 촬영 이미지 입력부(201), 센서값 입력부(203), 촬영각도 산출부(205), 학습부(207), 촬영각도 매칭부(210), 촬영 범위 설정모듈(220), 재촬영 신호 생성부(230), 출력부(240)를 포함하는 것일 수 있다.Referring to FIG. 1 , an apparatus 20 for providing an optimal photographing range using a quality analysis result according to an embodiment of the present invention includes a photographed image input unit 201 , a sensor value input unit 203 , a photographing angle calculation unit 205 , and learning. It may include a unit 207 , a shooting angle matching unit 210 , a shooting range setting module 220 , a reshooting signal generating unit 230 , and an output unit 240 .

촬영 이미지 입력부(201)는 가속도 센서와 카메라를 포함하고 외부와 통신가능한 단말기(10)로부터 물품을 촬영함에 따라 생성되는 촬영 이미지를 입력받는 것일 수 있다.The photographed image input unit 201 may receive a photographed image generated by photographing an article from the terminal 10 including an acceleration sensor and a camera and capable of communicating with the outside.

여기서 단말기(10)는 카메라, 가속도 센서, 통신부를 포함하여 물품을 촬영함에 따른 촬영 이미지를 생성하고, 물품을 촬영함에 따른 가속도 센서값을 감지하며, 촬영 이미지와 촬영 이미지에 대한 가속도 센서값을 외부로 출력하는 것일 수 있다.Here, the terminal 10 includes a camera, an acceleration sensor, and a communication unit to generate a photographed image according to photographing the object, detect an acceleration sensor value according to photographing the object, and externally output the photographed image and the acceleration sensor value for the photographed image. It may be output as .

여기서 가속도 센서는 단말기(10)의 기울기에 따른 3축 가속도 또는 6축 가속도를 측정함에 따라 가속도 센서값을 감지하는 것일 수 있다.Here, the acceleration sensor may detect an acceleration sensor value by measuring 3-axis acceleration or 6-axis acceleration according to the inclination of the terminal 10 .

센서값 입력부(203)는 단말기(10)로부터 촬영 이미지를 촬영한 시점에서의 가속도 센서값을 입력받는 것일 수 있다.The sensor value input unit 203 may receive an acceleration sensor value from the terminal 10 at the point in time when the photographed image is photographed.

여기서 가속도 센서값은 x축에 대한 가속도 센서값과 y축에 대한 가속도 센서값과 z축에 대한 가속도 센서값을 포함하는 것일 수 있다.Here, the acceleration sensor value may include an acceleration sensor value on the x-axis, an acceleration sensor value on the y-axis, and an acceleration sensor value on the z-axis.

촬영각도 산출부(205)는 가속도 센서값에 기초하여 촬영 이미지를 촬영한 시점에서 단말기(10)의 기울기에 대응되는 촬영각도를 산출하는 것일 수 있다.The photographing angle calculating unit 205 may calculate a photographing angle corresponding to the inclination of the terminal 10 at the time of photographing the photographed image based on the acceleration sensor value.

촬영각도 산출부(205)는 x, y, z 축 중 어느 한 축에 대한 가속도 센서값과 다른 한 축에 대한 가속도 센서값을 나눈 값을 아크 탄젠트함에 따라 어느 한 축과 다른 한 축으로 이루어진 평면을 기준으로 단말기(10)의 촬영각도를 산출하는 것일 수 있다.The photographing angle calculating unit 205 divides the acceleration sensor value for one of the x, y, and z axes by the value obtained by dividing the acceleration sensor value for the other axis by arc tangent, so that a plane formed of one axis and the other axis. It may be to calculate the shooting angle of the terminal 10 based on .

예를 들어, 단말기(10)가 yz평면을 기준으로 θ만큼 기울어진 경우, y축 가속도(

Figure 112020074582888-pat00001
)와 z축 가속도(
Figure 112020074582888-pat00002
)는 아래의 수식으로 나타낼 수 있다.For example, when the terminal 10 is inclined by θ with respect to the yz plane, the y-axis acceleration (
Figure 112020074582888-pat00001
) and the z-axis acceleration (
Figure 112020074582888-pat00002
) can be expressed by the following formula.

Figure 112020074582888-pat00003
Figure 112020074582888-pat00003

Figure 112020074582888-pat00004
Figure 112020074582888-pat00004

여기서 g는 중력가속도이고, k는 스프링 상수이다.where g is the gravitational acceleration and k is the spring constant.

yz평면을 기준으로 한 단말기(10)의 기울기(θ)는 아래의 수식으로 나타낼 수 있다.The inclination θ of the terminal 10 with respect to the yz plane may be expressed by the following equation.

Figure 112020074582888-pat00005
Figure 112020074582888-pat00005

촬영각도 산출부(205)는 y축에 대한 가속도 센서값에 z축에 대한 가속도 센서값을 나눔에 따라 산출된 값을 아크 탄젠트함에 따라 yz평면에 대한 단말기(10) 기울기와, x축에 대한 가속도 센서값에 z축에 대한 가속도 센서값을 나눔에 따라 산출된 값을 아크 탄젠트함에 따라 xz평면에 대한 단말기(10) 기울기를 산출하여, yz평면에 대한 단말기(10) 기울기와 xz평면에 대한 단말기(10) 기울기를 포함하는 촬영각도를 산출하는 것일 수 있다.The photographing angle calculation unit 205 divides the acceleration sensor value on the y-axis by the acceleration sensor value on the z-axis to arc tangent to the terminal 10 inclination with respect to the yz plane, and for the x-axis. By dividing the acceleration sensor value for the z-axis by the acceleration sensor value, the terminal 10 slope for the xz plane is calculated by arc tangent to the terminal 10 slope for the yz plane and the slope for the xz plane The terminal 10 may be to calculate the shooting angle including the inclination.

학습부(207)는 입력층, 복수의 콘볼루션층, 복수의 풀링층, 복수의 relu층을 포함하는 신경망 구조의 학습 모델을 포함하며, 품질 불량인 물품에 대한 복수개의 이미지들 또는 품질 양호한 물품에 대한 복수개의 이미지들과, 품질 불량에 대한 복수개의 이미지들 또는 품질 양호한 물품에 대한 복수개의 이미지들에 각각 대응되는 지도학습값들을 이용하여 기설정된 신경망 구조의 파라미터들이 정리됨에 따라 학습 모델을 미리 학습시키는 것일 수 있다.The learning unit 207 includes a learning model of a neural network structure including an input layer, a plurality of convolutional layers, a plurality of pooling layers, and a plurality of relu layers, and includes a plurality of images for an article with poor quality or an article with good quality. Using supervised learning values respectively corresponding to a plurality of images for , a plurality of images for poor quality or a plurality of images for a good quality article, as the parameters of a preset neural network structure are sorted out, the learning model is pre-configured. It could be learning.

촬영각도 매칭부(210)는 촬영 이미지를 입력받아 품질 불량 또는 품질 양호한지 구분 가능하도록 미리 학습된 학습 모델에 촬영 이미지를 적용함에 따라 품질 불량에 대응되는 제1 분류값 또는 품질 양호에 대응되는 제2 분류값을 선택하여 가속도 센서값과 매칭시키는 것일 수 있다.The photographing angle matching unit 210 receives the photographed image and applies the photographed image to the pre-learned learning model so as to be able to distinguish whether the quality is poor or the quality is good. 2 It may be to select a classification value and match it with the acceleration sensor value.

촬영각도 매칭부(210)는 품질 판단부(211)와 매칭부(213)를 포함하는 것일 수 있다.The shooting angle matching unit 210 may include a quality determining unit 211 and a matching unit 213 .

품질 판단부(211)는 촬영 이미지를 입력받아 품질 불량 또는 품질 양호한지 구분 가능하도록 미리 학습된 학습 모델에 촬영 이미지를 적용함에 따라 품질 불량에 대응되는 제1 분류값 또는 품질 양호에 대응되는 제2 분류값을 선택하여 촬영 이미지에 대한 분류값으로 출력하는 것일 수 있다.The quality determination unit 211 receives the captured image and applies the captured image to a pre-trained learning model to distinguish whether the quality is poor or good quality. The classification value may be selected and outputted as a classification value for the photographed image.

매칭부(213)는 품질 판단부(211)에서 출력되는 촬영 이미지에 대한 분류값을 촬영 이미지에 대한 촬영각도와 매칭시키는 것일 수 있다.The matching unit 213 may match the classification value of the photographed image output from the quality determination unit 211 with the photographing angle of the photographed image.

촬영 범위 설정모듈(220)은 기설정된 시간 동안 제1 분류값과 매칭되는 복수개의 촬영각도들에 기초하여 복수개의 촬영각도 범위를 생성하고, 제1 분류값과 매칭되는 복수개의 촬영각도들의 분포에 기초하여 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 것일 수 있다.The shooting range setting module 220 generates a plurality of shooting angle ranges based on the plurality of shooting angles matching the first classification value for a preset time, and includes a distribution of the plurality of shooting angles matching the first classification value. Based on the photographing angle range, any one of the plurality of photographing angle ranges may be set as the optimal photographing range.

여기서 기설정된 시간이란 최적 촬영 범위를 설정하기 위한 촬영 이미지와 가속도 센서값을 수집하기 위한 기간으로써, 예를 들어 하루, 일주일, 한달이 될 수 있으며, 기설정된 시간 이후 지속적으로 제1 분류값에 매칭되는 촬영각도를 입력받아, 지속적으로 입력되는 제1 분류값에 매칭되는 촬영각도를 이용하여 복수개의 촬영각도 범위를 생성하고, 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 것일 수 있다.Here, the preset time refers to a period for collecting captured images and acceleration sensor values for setting the optimal shooting range, and may be, for example, one day, one week, or one month, and continuously matches the first classification value after the preset time. A plurality of shooting angle ranges are generated using a shooting angle matching the continuously input first classification value, and any one shooting angle range among the plurality of shooting angle ranges is set as an optimal shooting range. may be doing

촬영 범위 설정모듈(220)은 불량검출 촬영각도 저장부(221), 센서값 범위 생성부(223), 촬영 범위 생성부(225)를 포함하는 것일 수 있다.The photographing range setting module 220 may include a defective detection photographing angle storage unit 221 , a sensor value range generation unit 223 , and a photographing range generation unit 225 .

불량검출 촬영각도 저장부(221)는 기설정된 시간동안 불량에 대응되는 제1 분류값과 매칭되는 복수개의 촬영각도들을 수집하여 저장하는 것일 수 있다.The defective detection photographing angle storage unit 221 may collect and store a plurality of photographing angles matching the first classification value corresponding to the defect for a preset time.

센서값 범위 생성부(223)는 제1 분류값과 매칭되는 복수개의 촬영각도들 중 최댓값과 제1 분류값과 매칭되는 복수개의 촬영각도들 중 최솟값에 기초하여 복수개의 촬영각도 범위를 생성하는 것일 수 있다.The sensor value range generator 223 generates a plurality of shooting angle ranges based on a maximum value among a plurality of shooting angles matching the first classification value and a minimum value among a plurality of shooting angles matching the first classification value. can

센서값 범위 생성부(223)는 제1 분류값과 매칭되는 복수개의 촬영각도들 중 최솟값부터 제1 분류값과 매칭되는 복수개의 촬영각도들 중 최댓값까지의 범위를 기설정된 갯수로 균등하게 나눔에 따라 복수개의 촬영각도 범위를 생성하는 것일 수 있다.The sensor value range generator 223 divides the range from the minimum value among the plurality of photographing angles matching the first classification value to the maximum value among the plurality of photographing angles matching the first classification value by a predetermined number equally. Accordingly, a plurality of photographing angle ranges may be generated.

본 발명의 일 실시예에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치(20)에 있어서 센서값 범위 생성부(223)는 기설정된 시간동안 제1 분류값과 매칭되는 복수개의 촬영각도들 중 최솟값과 최댓값에 기초하여 복수개의 촬영각도 범위를 생성함에 따라, 불필요한 촬영각도 범위를 생성하지 않도록 한다.In the apparatus 20 for providing an optimal photographing range using the quality analysis result according to an embodiment of the present invention, the sensor value range generator 223 is configured to have a minimum value among a plurality of photographing angles matching the first classification value for a preset time. By generating a plurality of shooting angle ranges based on the and maximum values, unnecessary shooting angle ranges are not generated.

촬영 범위 생성부(225)는 제1 분류값과 매칭되는 복수개의 촬영각도들을 각각 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위로 분류하고, 복수개의 촬영각도 범위에 분류된 촬영각도의 갯수에 기초하여 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 것일 수 있다.The shooting range generating unit 225 classifies the plurality of shooting angles matching the first classification value into any one shooting angle range among the plurality of shooting angle ranges, and the number of shooting angles classified into the plurality of shooting angle ranges is based on the number of shooting angles. Based on the photographing angle range, any one of the plurality of photographing angle ranges may be set as the optimal photographing range.

촬영 범위 생성부(225)는 제1 분류값과 매칭되는 복수개의 촬영각도들을 각각 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위로 분류하고, 복수개의 촬영각도 범위 각각에 분류된 촬영각도의 갯수에 따라 복수개의 촬영각도 범위 각각에 대응되는 복수개의 카운팅값을 생성하며, 복수개의 카운팅값들 중 최댓값인 어느 하나의 카운팅값에 대응되는 촬영각도 범위를 최적 촬영 범위로 설정하는 것일 수 있다.The photographing range generator 225 classifies the plurality of photographing angles matching the first classification value into any one of the plurality of photographing angle ranges, and the number of photographing angles classified into each of the plurality of photographing angle ranges. Accordingly, a plurality of counting values corresponding to each of the plurality of shooting angle ranges are generated, and a shooting angle range corresponding to any one counting value that is the maximum value among the plurality of counting values may be set as the optimal shooting range.

아래의 표 1은 제1 분류값과 매칭되는 100개의 촬영각도들이, 100개의 촬영각도 중 최솟값과 최솟값 사이의 범위를 4개로 균등하게 나눔에 따라 생성된 복수개의 촬영각도 범위(범위의 시점이 최솟값과 가까운 순으로 제1 촬영각도 범위, 제2 촬영각도 범위, 제3 촬영각도 범위, 제4 촬영각도 범위)에 분류된 일례를 나타낸 것이다.Table 1 below shows that 100 shooting angles matching the first classification value are generated by equally dividing the range between the minimum value and the minimum value among the 100 shooting angles into four. Examples classified into the first photographing angle range, the second photographing angle range, the third photographing angle range, and the fourth photographing angle range) are shown in the order of closest to .

제1 촬영각도 범위1st shooting angle range 제2 촬영각도 범위2nd shooting angle range 제3 촬영각도 범위3rd shooting angle range 제4 촬영각도 범위4th shooting angle range 갯수(카운팅값)number (counting value) 1010 2727 3535 2828

촬영 범위 생성부(225)는 촬영각도 범위에 대한 카운팅값들 중 최댓값인 카운팅값(35)에 대응되는 제3 촬영각도 범위를 최적 촬영 범위로 설정하는 것일 수 있다. The photographing range generator 225 may set the third photographing angle range corresponding to the counting value 35, which is the maximum among the counting values for the photographing angle range, as the optimal photographing range.

본 발명의 일 실시예에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치(20)에 있어서 촬영 범위 생성부(225)는 불량에 대응되는 분류값과 매칭된 촬영각도의 빈도가 높은 촬영각도 범위를 최적 촬영 범위로 설정함에 따라, 촬영 이미지를 이용하여 불량을 잘 식별하기 위한 최적의 촬영 각도를 제공하도록 한다.In the apparatus 20 for providing an optimal shooting range using the quality analysis result according to an embodiment of the present invention, the shooting range generating unit 225 selects a shooting angle range with a high frequency of shooting angles matched with a classification value corresponding to a defect. By setting the optimal shooting range, an optimal shooting angle for well identifying defects is provided using the captured image.

촬영 범위 생성부(225)는 복수개의 촬영각도 범위 각각에 대응되는 복수개의 카운팅값들 중 최솟값인 카운팅값에 대응되는 촬영각도 범위를 재촬영 범위로 설정하는 것일 수 있다.The photographing range generator 225 may set a photographing angle range corresponding to a counting value that is a minimum value among a plurality of counting values corresponding to each of the plurality of photographing angle ranges as a re-photographing range.

표 2를 참조하면, 촬영 범위 생성부(225)는 촬영각도 범위에 대한 카운팅값들 중 최솟값인 카운팅값(10)에 대응되는 제1 촬영각도 범위를 재촬영 범위로 설정하는 것일 수 있다. Referring to Table 2, the photographing range generator 225 may set the first photographing angle range corresponding to the counting value 10, which is the minimum value among the counting values for the photographing angle range, as the re-photographing range.

재촬영 신호 생성부(230)는 제2 분류값과 매칭되는 촬영각도가 최적 촬영 범위에 속하지 않으면 재촬영 신호를 생성하는 것일 수 있다.The rephotographing signal generator 230 may generate a rephotographing signal when the photographing angle matching the second classification value does not fall within the optimal photographing range.

재촬영 신호 생성부(230)는 제2 분류값과 매칭되는 촬영각도가 재촬영 범위에 속하면 재촬영 신호를 생성하는 것일 수 있다.The rephotographing signal generator 230 may generate a rephotographing signal when the photographing angle matching the second classification value falls within the rephotographing range.

재촬영 신호 생성부(230)는 단말기(10)에서 촬영한 촬영 이미지가 품질 양호로 판단되더라도, 촬영 이미지 촬영시의 각도가 최적 촬영 범위에 속하지 않으면 재촬영 신호를 생성함에 따라, 해당 단말기(10)가 최적 촬영 범위에 해당하는 촬영각도로 재촬영하도록 한다.Even if it is determined that the captured image taken by the terminal 10 is of good quality, the recapture signal generating unit 230 generates a recapture signal if the angle at which the captured image is captured does not fall within the optimal shooting range. ) is taken again at a shooting angle that corresponds to the optimal shooting range.

출력부(240)는 재촬영 신호 생성부(230)에서 재촬영 신호가 생성되면, 최적 촬영 범위를 단말기(10)로 출력하는 것일 수 있다.The output unit 240 may output an optimal photographing range to the terminal 10 when the rephotographing signal is generated by the rephotographing signal generating unit 230 .

출력부(240)는 최적 촬영 범위를 벗어난 촬영각도로 촬영 이미지를 촬영한 단말기(10)에 최적 촬영 범위에 대응되는 촬영각도 범위로 물품을 재촬영하도록 하기 위해 최적 촬영 범위를 단말기(10)로 출력하는 것일 수 있다.The output unit 240 sets the optimal shooting range to the terminal 10 so that the terminal 10, which has taken a shot image at a shooting angle out of the optimal shooting range, re-photographs the article in the shooting angle range corresponding to the optimal shooting range. It may be output.

본 발명의 일 실시예에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치(20)는 품질 불량으로 판단된 촬영 이미지의 촬영각도를 이용하여 품질 불량이 많이 검출되는 촬영각도를 최적 촬영 범위로 설정함에 따라, 품질 양호로 판단된 촬영 이미지에 대한 촬영각도가 최적 촬영 범위에 속하지 않으면 재촬영을 요청할 수 있다.The apparatus 20 for providing an optimal shooting range using the quality analysis result according to an embodiment of the present invention sets the shooting angle at which a high quality defect is detected as the optimal shooting range using the shooting angle of the captured image determined to be of poor quality. Accordingly, if the photographing angle of the photographed image determined to be of good quality does not fall within the optimal photographing range, re-photography may be requested.

즉, 본 발명의 일 실시예에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치(20)는 불량 이 상대적으로 적게 검출되는 촬영각도로 촬영한 경우 촬영 이미지가 품질 양호로 판단되면 불량 검출율이 상대적으로 높게 검출되는 촬영각도로 재촬영하도록 단말기(10)에 재촬영을 요청함에 따라 불량 검출율이 낮은 촬영각도로 촬영함으로써 품질 불량인 물품이 품질 양호로 판단되는 것을 방지하는 이점이 있다.That is, in the apparatus 20 for providing an optimal shooting range using the quality analysis result according to an embodiment of the present invention, when the captured image is judged to be of good quality when the image is captured at a shooting angle at which a defect is detected relatively, the defect detection rate is relatively low. As a result of requesting the terminal 10 to re-shoot at a shooting angle that is detected as high as a shooting angle, there is an advantage in that an article with poor quality is prevented from being judged as good quality by shooting at a shooting angle with a low defect detection rate.

도 2는 본 발명의 다른 실시예에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 방법의 순서도이다.2 is a flowchart of a method for providing an optimal shooting range using a quality analysis result according to another embodiment of the present invention.

본 발명의 다른 실시예에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 방법은 본 발명의 일 실시예에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치(20)에 의해 수행될 수 있다.The method for providing an optimal imaging range using the quality analysis result according to another embodiment of the present invention may be performed by the apparatus 20 for providing an optimal imaging range using the quality analysis result according to the embodiment of the present invention.

이하, 상기에서 설명한 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치(20)와 중복되는 내용 및 구성은 도면 부호를 일치시키고 설명의 편의를 위해 자세한 설명을 생략하도록 한다.Hereinafter, contents and configurations overlapping those of the apparatus 20 for providing an optimal shooting range using the above-described quality analysis result are identical to reference numerals, and detailed descriptions will be omitted for convenience of description.

품질 분석 결과를 이용한 최적 촬영 범위 제공 장치(20)는 가속도 센서와 카메라를 포함하고 외부와 통신가능한 단말기(10)로부터 물품을 촬영함에 따라 생성되는 촬영 이미지와 촬영 이미지의 촬영 시점에서 단말기(10)의 가속도 센서에서 감지되는 가속도 센서값을 입력받고(S101), 가속도 센서값에 기초하여 촬영 이미지를 촬영한 시점에서 단말기(10)의 기울기에 대응되는 촬영각도를 산출하며(S103), 촬영 이미지를 입력받아 품질 불량 또는 품질 양호한지 구분 가능하도록 미리 학습된 학습 모델에 촬영 이미지를 적용함에 따라 품질 불량에 대응되는 제1 분류값 또는 품질 양호에 대응되는 제2 분류값을 선택하여 촬영각도와 매칭시키는(S105) 것일 수 있다.The apparatus 20 for providing an optimal shooting range using the quality analysis result includes an acceleration sensor and a camera, and a photographed image generated by photographing an article from the terminal 10 capable of communicating with the outside and the terminal 10 at the time of photographing the photographed image An acceleration sensor value detected by the acceleration sensor of By applying the photographed image to the pre-trained learning model to be able to distinguish whether the quality is poor or good quality, the first classification value corresponding to the poor quality or the second classification value corresponding to the good quality is selected and matched with the shooting angle (S105) may be.

품질 분석 결과를 이용한 최적 촬영 범위 제공 장치(20)는 기설정된 시간 동안 제1 분류값이 매칭된 복수개의 촬영각도들을 수집하고(S107), 제1 분류값이 매칭된 복수개의 촬영각도들 중 최댓값과 제1 분류값이 매칭된 복수개의 촬영각도들 중 최솟값에 기초하여 복수개의 촬영각도 범위를 생성하며(S109), 제1 분류값이 매칭된 복수개의 촬영각도들의 분포에 기초하여 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는(S111) 것일 수 있다.The apparatus 20 for providing an optimal shooting range using the quality analysis result collects a plurality of shooting angles matched with a first classification value for a preset time (S107), and a maximum value among the plurality of shooting angles matched with the first classification value and a plurality of shooting angle ranges are generated based on the minimum value among the plurality of shooting angles matched with the first classification value (S109), and a plurality of shooting angles based on the distribution of the plurality of shooting angles to which the first classification value is matched It may be to set any one of the shooting angle ranges as the optimal shooting range (S111).

S111 단계에서 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치(20) 제1 분류값과 매칭되는 복수개의 촬영각도들을 각각 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위로 분류하고, 복수개의 촬영각도 범위에 분류된 촬영각도의 갯수에 기초하여 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 것일 수 있다.In step S111, a plurality of shooting angles matching the first classification value of the apparatus 20 for providing an optimal shooting range using the quality analysis result are classified into any one shooting angle range from among the plurality of shooting angle ranges, and the plurality of shooting angle ranges It may be to set any one of the plurality of shooting angle ranges as the optimal shooting range based on the number of shooting angles classified in .

S111 단계에서 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치(20)는 제1 분류값과 매칭되는 복수개의 촬영각도들을 각각 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위로 분류하고, 복수개의 촬영각도 범위 각각에 분류된 촬영각도의 갯수에 따라 복수개의 촬영각도 범위 각각에 대응되는 복수개의 카운팅값을 생성하며, 복수개의 카운팅값들 중 최댓값인 어느 하나의 카운팅값에 대응되는 촬영각도 범위를 선택하여 최적 촬영 범위로 설정하는 것일 수 있다.In step S111 , the apparatus 20 for providing an optimal shooting range using the quality analysis result classifies the plurality of shooting angles matching the first classification value into any one shooting angle range among the plurality of shooting angle ranges, and the plurality of shooting angles A plurality of counting values corresponding to each of a plurality of shooting angle ranges are generated according to the number of shooting angles classified in each range, and a shooting angle range corresponding to any one counting value that is the maximum value among the plurality of counting values is selected. It may be to set the optimal shooting range.

S111단계 이후 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치(20)는 가속도 센서와 카메라를 포함하고 외부와 통신가능한 단말기(10)로부터 물품을 촬영함에 따라 생성되는 평가대상 촬영 이미지와 평가대상 촬영 이미지를 촬영한 시점에서의 단말기(10)의 가속도 센서에서 감지되는 가속도 센서값을 입력받아(S113), 가속도 센서값에 기초하여 촬영 이미지를 촬영한 시점에서 단말기(10)의 기울기에 대응되는 촬영각도를 산출하고(S115), 촬영 이미지를 입력받아 품질 불량 또는 품질 양호한지 구분 가능하도록 미리 학습된 학습 모델에 평가대상 촬영 이미지를 적용함에 따라 품질 불량에 대응되는 제1 분류값 또는 품질 양호에 대응되는 제2 분류값을 선택하여 촬영각도와 매칭시키며(S117), 제2 분류값과 매칭되는 촬영각도가 최적 촬영 범위에 속하지 않으면 재촬영 신호를 생성하는(S119) 것일 수 있다.After step S111, the apparatus 20 for providing an optimal shooting range using the quality analysis result includes an acceleration sensor and a camera and provides an evaluation target photographed image and an evaluation target photographed image generated by photographing an article from the terminal 10 capable of communicating with the outside. An acceleration sensor value detected by the acceleration sensor of the terminal 10 at the time of photographing is received (S113), and a photographing angle corresponding to the inclination of the terminal 10 at the time of photographing the photographed image based on the acceleration sensor value is determined Calculating (S115), receiving the captured image and applying the evaluation target captured image to the pre-trained learning model so as to be able to distinguish whether the quality is poor or quality is good. The second classification value may be selected and matched with the photographing angle (S117), and if the photographing angle matched with the second classification value does not fall within the optimal photographing range, a rephotographing signal may be generated (S119).

여기서 평가대상 촬영 이미지란, 최적 촬영 범위가 생성된 시점 이후에 단말기(10)로부터 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치(20)에 입력되는 촬영 이미지를 의미하는 것일 수 있다.Here, the evaluation target photographed image may mean a photographed image input from the terminal 10 to the optimal photographing range providing apparatus 20 using the quality analysis result after the optimal photographing range is generated.

품질 분석 결과를 이용한 최적 촬영 범위 제공 장치(20)는 제1 분류값과 매칭된 평가대상 이미지에 대한 촬영각도를 지속적으로 저장하며, 제1 분류값과 매칭된 복수개의 촬영각도들에 기초하여 복수개의 촬영각도 범위를 생성하고, 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 것일 수 있다.The apparatus 20 for providing an optimal shooting range using the quality analysis result continuously stores the shooting angle for the evaluation target image matched with the first classification value, and a plurality of shooting angles based on the plurality of shooting angles matched with the first classification value It may be to generate two photographing angle ranges, and to set any one of the plurality of photographing angle ranges as the optimal photographing range.

본 발명의 실시예들에 따른 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치 및 방법에 따르면, 물품을 촬영함에 따른 촬영 이미지의 품질 분석 결과와 촬영각도를 이용하여 품질 불량이 상대적으로 많이 검출되는 촬영각도의 범위를 최적 촬영 범위로 설정할 수 있다.According to the apparatus and method for providing an optimal shooting range using the quality analysis result according to the embodiments of the present invention, a shooting angle at which a relatively large number of quality defects is detected using the quality analysis result and the shooting angle of a photographed image according to the photographing of an article. can be set as the optimal shooting range.

품질 양호에 대응되는 제2 분류값과 매칭되는 촬영각도는 최적 촬영 범위에 속하는지 판단하여, 촬영각도가 최적 촬영 범위에 속하지 않으면 최적 촬영 범위에 속하는 촬영각도로 재촬영하도록 요청하여, 재촬영된 촬영 이미지를 이용하여 품질 불량이지만 촬영각도에 의해 품질 양호로 오판단된 물품을 불량으로 재판단하도록 할 수 있으며, 이에 따라 전체 품질 관리 시스템의 불량 감지율을 높일 수 있다.It is determined whether the shooting angle matching the second classification value corresponding to good quality falls within the optimal shooting range, and if the shooting angle does not fall within the optimal shooting range, it is requested to re-shoot at the shooting angle belonging to the optimal shooting range. By using the photographed image, it is possible to re-determine an article that is of poor quality but is erroneously judged to be of good quality by the angle of shooting, and accordingly, the failure detection rate of the entire quality management system can be increased.

본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구의 범위에 의하여 나타내어지며, 특허청구의 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.Those of ordinary skill in the art to which the present invention pertains will understand that the present invention may be embodied in other specific forms without changing the technical spirit or essential features thereof. Therefore, it should be understood that the embodiments described above are illustrative in all respects and not restrictive. The scope of the present invention is indicated by the claims to be described later rather than the above detailed description, and all changes or modifications derived from the claims and their equivalent concepts should be construed as being included in the scope of the present invention.

20 : 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치
201 : 촬영 이미지 입력부
203 : 센서값 입력부
210 : 촬영각도 매칭부
220 : 촬영 범위 설정모듈
230 : 재촬영 신호 생성부20: Device for providing optimal shooting range using quality analysis result
201: shooting image input unit
203: sensor value input unit
210: shooting angle matching unit
220: shooting range setting module
230: recapture signal generator

Claims (9)

가속도 센서와 카메라를 포함하고 외부와 통신가능한 단말기로부터 물품을 촬영함에 따라 생성되는 촬영 이미지를 입력받는 촬영 이미지 입력부;
상기 단말기로부터 상기 촬영 이미지를 촬영한 시점에서의 가속도 센서값을 입력받는 센서값 입력부;
상기 가속도 센서값에 기초하여 상기 촬영 이미지를 촬영한 시점에서 상기 단말기의 기울기에 대응되는 촬영각도를 산출하는 촬영각도 산출부;
상기 촬영 이미지를 입력받아 품질 불량 또는 품질 양호한지 구분 가능하도록 미리 학습된 학습 모델에 상기 촬영 이미지를 적용함에 따라 품질 불량에 대응되는 제1 분류값 또는 품질 양호에 대응되는 제2 분류값을 선택하여 상기 촬영각도와 매칭시키는 촬영각도 매칭부; 및
기설정된 시간 동안 상기 제1 분류값과 매칭되는 복수개의 촬영각도들에 기초하여 복수개의 촬영각도 범위를 생성하고, 상기 제1 분류값과 매칭되는 복수개의 촬영각도들의 분포에 기초하여 상기 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 촬영 범위 설정모듈;을 포함하고,
상기 촬영 범위 설정모듈은
기설정된 시간동안 상기 제1 분류값과 매칭되는 복수개의 촬영각도들을 저장하는 불량검출 촬영각도 저장부와, 상기 제1 분류값과 매칭되는 복수개의 촬영각도들 중 최댓값과 상기 제1 분류값과 매칭되는 복수개의 촬영각도들 중 최솟값에 기초하여 복수개의 촬영각도 범위를 생성하는 촬영각도 범위 생성부와, 상기 제1 분류값과 매칭되는 복수개의 촬영각도들 각각을 상기 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위로 분류하고, 상기 복수개의 촬영각도 범위에 분류된 촬영각도의 갯수에 기초하여 상기 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 촬영 범위 설정부를 포함하는 것
인 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치.a photographed image input unit including an acceleration sensor and a camera and receiving a photographed image generated by photographing an article from a terminal capable of communicating with the outside;
a sensor value input unit for receiving an acceleration sensor value at the point in time when the photographed image is photographed from the terminal;
a photographing angle calculator configured to calculate a photographing angle corresponding to the inclination of the terminal at the time of photographing the photographed image based on the acceleration sensor value;
By receiving the captured image and applying the captured image to a pre-trained learning model to distinguish whether the quality is poor or good, a first classification value corresponding to poor quality or a second classification value corresponding to good quality is selected. a photographing angle matching unit for matching the photographing angle; and
A plurality of photographing angle ranges are generated based on a plurality of photographing angles matching the first classification value for a preset time, and the plurality of photographing angles are generated based on a distribution of the plurality of photographing angles matched with the first classification value. Includes; a shooting range setting module for setting any one of the angle ranges as an optimal shooting range;
The shooting range setting module is
a defective detection photographing angle storage unit for storing a plurality of photographing angles matching the first classification value for a preset time, and a maximum value among the plurality of photographing angles matching the first classification value and matching the first classification value a photographing angle range generator generating a plurality of photographing angle ranges based on a minimum value among the plurality of photographing angles; A shooting range setting unit for classifying into a shooting angle range of , and setting any one of the plurality of shooting angle ranges as an optimal shooting range based on the number of shooting angles classified in the plurality of shooting angle ranges thing
A device that provides the optimal shooting range using the results of the phosphor quality analysis. 제1항에 있어서,
상기 촬영각도 매칭부는
품질 불량인 물품에 대한 복수개의 이미지들 또는 품질 양호한 물품에 대한 복수개의 이미지들과, 상기 품질 불량에 대한 복수개의 이미지들 또는 품질 양호한 물품에 대한 복수개의 이미지들에 각각 대응되는 지도학습값들을 이용하여 기설정된 신경망 구조의 파라미터들이 정리됨에 따라 미리 학습되는 학습 모델에 상기 촬영 이미지를 적용함에 따라 품질 불량에 대응되는 제1 분류값 또는 품질 양호에 대응되는 제2 분류값을 선택하여 상기 촬영각도와 매칭시키는 것
인 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치.According to claim 1,
The shooting angle matching unit
Using supervised learning values respectively corresponding to a plurality of images for a poor quality article or a plurality of images for a good quality article, and a plurality of images for the poor quality or a plurality of images for a good quality article Thus, as the parameters of the preset neural network structure are arranged, the first classification value corresponding to the poor quality or the second classification value corresponding to the good quality is selected as the photographed image is applied to the pre-trained learning model, and the photographing angle and the photographing angle are selected. matching
A device that provides the optimal shooting range using the results of the phosphor quality analysis. 삭제delete 제1항에 있어서,
상기 촬영 범위 설정부는,
상기 제1 분류값과 매칭되는 복수개의 촬영각도들을 각각 상기 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위로 분류하고, 상기 복수개의 촬영각도 범위 각각에 분류된 촬영각도의 갯수에 따라 상기 복수개의 촬영각도 범위 각각에 대응되는 복수개의 카운팅값을 생성하며, 상기 복수개의 카운팅값들 중 최댓값인 어느 하나의 카운팅값에 대응되는 촬영각도 범위를 최적 촬영 범위로 설정하는 것
인 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치.According to claim 1,
The shooting range setting unit,
Each of the plurality of shooting angles matching the first classification value is classified into any one shooting angle range among the plurality of shooting angle ranges, and the plurality of shooting angles are classified according to the number of shooting angles classified in each of the plurality of shooting angle ranges. generating a plurality of counting values corresponding to each of the shooting angle ranges, and setting a shooting angle range corresponding to any one counting value, which is the maximum value among the plurality of counting values, as the optimal shooting range
A device that provides the optimal shooting range using the results of the phosphor quality analysis. 제1항에 있어서,
상기 제2 분류값과 매칭되는 촬영각도가 상기 최적 촬영 범위에 속하지 않으면 재촬영 신호를 생성하는 재촬영 신호 생성부; 를 더 포함하는 품질 분석 결과를 이용한 최적 촬영 범위 제공 장치.According to claim 1,
a recapturing signal generator configured to generate a recapture signal when the shooting angle matching the second classification value does not fall within the optimal shooting range; An apparatus for providing an optimal shooting range using the quality analysis result further comprising a. 가속도 센서와 카메라를 포함하고 외부와 통신가능한 단말기로부터 물품을 촬영함에 따라 생성되는 촬영 이미지와 가속도 센서값을 입력받는 단계;
상기 가속도 센서값에 기초하여 상기 촬영 이미지를 촬영한 시점에서 상기 단말기의 기울기에 대응되는 촬영각도를 산출하는 단계;
상기 촬영 이미지를 입력받아 품질 불량 또는 품질 양호한지 구분 가능하도록 미리 학습된 학습 모델에 상기 촬영 이미지를 적용함에 따라 품질 불량에 대응되는 제1 분류값 또는 품질 양호에 대응되는 제2 분류값을 선택하여 상기 촬영각도와 매칭시키는 단계;
기설정된 시간 동안 상기 제1 분류값과 매칭되는 복수개의 촬영각도들을 수집하는 단계;
상기 제1 분류값과 매칭되는 복수개의 촬영각도들 중 최댓값과 상기 제1 분류값과 매칭되는 복수개의 촬영각도들 중 최소값에 기초하여 복수개의 촬영각도 범위를 생성하는 단계; 및
상기 제1 분류값과 매칭되는 복수개의 촬영각도들의 분포에 기초하여 상기 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 단계;를 포함하고,
상기 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 단계는
상기 제1 분류값과 매칭되는 복수개의 촬영각도들을 각각 상기 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위로 분류하고, 상기 복수개의 촬영각도 범위에 분류된 촬영각도의 갯수에 기초하여 상기 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 것
인 품질 분석 결과를 이용한 최적 촬영 범위 제공 방법.receiving a photographed image and an acceleration sensor value generated by photographing an article from a terminal including an acceleration sensor and a camera and capable of communicating with the outside;
calculating a photographing angle corresponding to the inclination of the terminal at the time of photographing the photographed image based on the acceleration sensor value;
By receiving the captured image and applying the captured image to a pre-trained learning model to distinguish whether the quality is poor or good, a first classification value corresponding to poor quality or a second classification value corresponding to good quality is selected. matching the photographing angle;
collecting a plurality of shooting angles matching the first classification value for a preset time;
generating a plurality of photographing angle ranges based on a maximum value among a plurality of photographing angles matching the first classification value and a minimum value among a plurality of photographing angles matching the first classification value; and
setting any one of the plurality of shooting angle ranges as an optimal shooting range based on a distribution of a plurality of shooting angles matching the first classification value;
The step of setting any one of the shooting angle ranges as the optimal shooting range
Each of the plurality of shooting angles matching the first classification value is classified into any one of the plurality of shooting angle ranges, and based on the number of shooting angles classified into the plurality of shooting angle ranges, the plurality of shooting angles are classified. Setting any one of the shooting angle ranges as the optimal shooting range
A method of providing the optimal shooting range using the results of the phosphor quality analysis. 삭제delete 제6항에 있어서,
상기 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 단계는
상기 제1 분류값과 매칭되는 복수개의 촬영각도들을 각각 상기 복수개의 촬영각도 범위 중 어느 하나의 촬영각도 범위로 분류하는 단계;
상기 복수개의 촬영각도 범위 각각에 분류된 촬영각도의 갯수에 따라 상기 복수개의 촬영각도 범위 각각에 대응되는 복수개의 카운팅값을 생성하는 단계; 및
상기 복수개의 카운팅값들 중 최댓값인 어느 하나의 카운팅값에 대응되는 촬영각도 범위를 선택하여 최적 촬영 범위로 설정하는 단계;를 포함하는 것
인 품질 분석 결과를 이용한 최적 촬영 범위 제공 방법.7. The method of claim 6,
The step of setting any one of the shooting angle ranges as the optimal shooting range
classifying each of the plurality of photographing angles matching the first classification value into any one of the plurality of photographing angle ranges;
generating a plurality of counting values corresponding to each of the plurality of photographing angle ranges according to the number of photographing angles classified in each of the plurality of photographing angle ranges; and
Selecting a shooting angle range corresponding to any one counting value that is the maximum value among the plurality of counting values and setting it as an optimal shooting range;
A method of providing the optimal shooting range using the results of the phosphor quality analysis. 제6항에 있어서,
상기 어느 하나의 촬영각도 범위를 최적 촬영 범위로 설정하는 단계 이후에 있어서,
가속도 센서와 카메라를 포함하고 외부와 통신가능한 단말기로부터 물품을 촬영함에 따라 생성되는 평가대상 촬영 이미지와 상기 평가대상 촬영 이미지를 촬영한 시점의 가속도 센서값을 입력받는 단계;
상기 가속도 센서값에 기초하여 상기 평가대상 촬영 이미지를 촬영한 시점에서 상기 단말기의 기울기에 대응되는 촬영각도를 산출하는 단계;
상기 촬영 이미지를 입력받아 품질 불량 또는 품질 양호한지 구분 가능하도록 미리 학습된 학습 모델에 상기 촬영 이미지를 적용함에 따라 품질 불량에 대응되는 제1 분류값 또는 품질 양호에 대응되는 제2 분류값을 선택하여 상기 촬영각도와 매칭시키는 단계; 및
상기 제2 분류값과 매칭되는 촬영각도가 상기 최적 촬영 범위에 속하지 않으면 재촬영 신호를 생성하는 단계; 를 더 포함하는 것
인 품질 분석 결과를 이용한 최적 촬영 범위 제공 방법.7. The method of claim 6,
After the step of setting any one of the shooting angle ranges as the optimal shooting range,
receiving an evaluation target photographed image generated by photographing an article from a terminal including an acceleration sensor and a camera and capable of communicating with the outside and an acceleration sensor value at the time the evaluation target photographed image is photographed;
calculating a photographing angle corresponding to the inclination of the terminal at a time point at which the evaluation target photographed image is photographed based on the acceleration sensor value;
By receiving the captured image and applying the captured image to a pre-trained learning model to distinguish whether the quality is poor or good, a first classification value corresponding to poor quality or a second classification value corresponding to good quality is selected. matching the photographing angle; and
generating a re-photographing signal when the photographing angle matching the second classification value does not fall within the optimal photographing range; to further include
A method of providing the optimal shooting range using the results of the phosphor quality analysis.
KR1020200088729A 2020-07-17 2020-07-17 Apparatus and method for providing optimun photographing range using result of quality analyzation KR102453132B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200088729A KR102453132B1 (en) 2020-07-17 2020-07-17 Apparatus and method for providing optimun photographing range using result of quality analyzation

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200088729A KR102453132B1 (en) 2020-07-17 2020-07-17 Apparatus and method for providing optimun photographing range using result of quality analyzation

Publications (2)

Publication Number Publication Date
KR20220010168A KR20220010168A (en) 2022-01-25
KR102453132B1 true KR102453132B1 (en) 2022-10-11

Family

ID=80048982

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200088729A KR102453132B1 (en) 2020-07-17 2020-07-17 Apparatus and method for providing optimun photographing range using result of quality analyzation

Country Status (1)

Country Link
KR (1) KR102453132B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020077326A (en) * 2018-11-09 2020-05-21 オムロン株式会社 Photographing method and photographing device

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU4277501A (en) * 2000-03-24 2001-10-03 Olympus Optical Co., Ltd. Apparatus for detecting defect
KR102362616B1 (en) 2009-07-31 2022-02-15 가부시키가이샤 한도오따이 에네루기 켄큐쇼 Display device
KR102367848B1 (en) 2017-04-27 2022-02-25 주식회사 레이크머티리얼즈 A Manufacturing Method of Tungsten Film with Low Fluorine Concentration
KR20170099393A (en) * 2017-07-14 2017-08-31 한국광기술원 Material visualization system

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020077326A (en) * 2018-11-09 2020-05-21 オムロン株式会社 Photographing method and photographing device

Also Published As

Publication number Publication date
KR20220010168A (en) 2022-01-25

Similar Documents

Publication Publication Date Title
KR102171491B1 (en) Method for sorting products using deep learning
US10776911B2 (en) Information processing apparatus, identification system, setting method, and program
US8581162B2 (en) Weighting surface fit points based on focus peak uncertainty
JP7082715B2 (en) Detection of machining errors in laser machining systems using deep convolutional neural networks
TW201721784A (en) Adaptive automatic defect classification
CN102253048B (en) Machine vision detection method and system for detection of various products
US20140168661A1 (en) High-speed, 3-d method and system for optically measuring a geometric dimension of manufactured parts
CN105184213A (en) Image Recognition Method And Camera System
CN108090896B (en) Wood board flatness detection and machine learning method and device and electronic equipment
CN107544432A (en) Life determining apparatus, life determining method and computer-readable recording medium
CN111062918B (en) Abnormality detection method and device based on computer vision
WO2020087004A1 (en) Algorithm selector based on image frames
Syam et al. In-process measurement of the surface quality for a novel finishing process for polymer additive manufacturing
JP4514230B2 (en) Component suction posture discrimination method and component suction posture discrimination system
KR102453132B1 (en) Apparatus and method for providing optimun photographing range using result of quality analyzation
CN110225335B (en) Camera stability evaluation method and device
US20220076021A1 (en) System and method for automatic visual inspection with deep learning
JP6708695B2 (en) Inspection equipment
US20210191372A1 (en) Analysis of additive manufacturing processes
JP2021039457A (en) Image processing method, edge model creation method, robot system, and article manufacturing method
CN116739970A (en) Apparatus for evaluating edge defects in silicon wafer and method thereof
KR102536835B1 (en) Method of testing defect of silicon wafer
CN106841217A (en) A kind of flaw detection method, device and system
TWI497623B (en) A system and a method for automatic recipe validation and selection
CN112529960A (en) Target object positioning method and device, processor and electronic device

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant