KR20170082833A

KR20170082833A - Image Synthesis Method for Preventing Forgery and Alteration and Method for Reading the Image

Info

Publication number: KR20170082833A
Application number: KR1020160002075A
Authority: KR
Inventors: 문기봉; 천정희
Original assignee: 한국스마트인증 주식회사; 서울대학교산학협력단
Priority date: 2016-01-07
Filing date: 2016-01-07
Publication date: 2017-07-17

Abstract

본 발명에 의한 이미지 합성 방법은 컴퓨터에 의해서 수행되며, 원본 이미지의 소정의 위치에 대한 특징 정보를 획득하는 제1 단계와, 상기 특징 정보에 기초한 인증값을 산출하는 제2 단계와, 상기 인증값을 표시하는 태그 정보를 생성하는 제3 단계와, 상기 태그 정보를 원본 이미지에 합성하는 제4 단계를 포함한다.A method for synthesizing an image according to the present invention includes a first step of acquiring feature information on a predetermined position of an original image, a second step of calculating an authentication value based on the feature information, And a fourth step of synthesizing the tag information with the original image.

Description

BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image synthesis method for preventing forgery and falsification,

본 발명은 위변조를 방지하는 이미지 합성 방법 및 그러한 이미지의 판독 방법에 관한 것으로서 좀더 자세하게는 소정의 태그 정보와 원본 이미지를 합성하고 그러한 이미지를 판독하는 방법에 대한 것이다.FIELD OF THE INVENTION The present invention relates to an image combining method for preventing forgery and falsification, and a method of reading such an image, and more particularly, to a method of composing a predetermined tag information and an original image and reading such an image.

주민등록증이나 운전면허증, 여권과 같은 신분증에는 본인 확인을 위해 사진이 부착된다. 그런데 그러한 신분증에 부착된 사진을 바꿔치기 하여 위조하거나 변조하는 경우가 빈번하고 사람에 의한 육안 확인은 오인의 가능성이 높은 문제가 있다.Identification cards such as a resident registration card, driver's license or passport will be photographed for identification. However, there are frequent cases of forgery or alteration of photos attached to such ID cards, and there is a high possibility of misidentification by human visual confirmation.

안면인식기술을 적용하더라도 사진 이미지의 품질 문제로 인해 인식율이 떨어질 수 있는 문제가 있다.Even if the face recognition technology is applied, there is a problem that the recognition rate may be lowered due to the quality problem of the photographic image.

이러한 문제를 보완하기 위해서 신분증에 IC 칩 등 전자적인 수단을 삽입하는 기술이 도입되었지만 그 경우 IC칩 전용 리더가 필요하여 사용례가 제한적일 수 밖에 없다. 그리고 IC칩을 사용하더라도 신분증(증표) 자체의 진위 여부를 판별할 수 있을 뿐이며 사진을 교체하는 등의 위변조가 일어나는 경우에는 이를 판별하기 어려운 한계가 있다.In order to overcome this problem, a technique of inserting electronic means such as IC chips into ID cards has been introduced, but in this case, a dedicated IC chip reader is required, and the use cases are limited. Even if IC chips are used, it is only possible to judge authenticity of the ID card itself, and it is difficult to discriminate the IC card if a forgery or alteration such as a photograph is occurred.

본 발명은 신분증과 같은 증표상의 이미지의 위변조를 방지할 수 있는 이미지 합성 방법 및 그렇게 합성된 이미지를 판독하여 이미지의 위변조를 검지할 수 있는 방법을 제공하는 것을 목적으로 한다.An object of the present invention is to provide an image combining method capable of preventing forgery and falsification of an image on a banner such as an ID card, and a method of detecting forgery and falsification of an image by reading the thus synthesized image.

또한, 본 발명은 증표 원본이 아닌 스캔 또는 사진 촬영된 사본을 통해서도 해당 사본이 나타내는 원본의 위변조를 검지할 수 있는 방법을 제공하는 것을 목적으로 한다.It is another object of the present invention to provide a method for detecting forgery and falsification of an original represented by a corresponding copy through a scan or photographed copy rather than an original proof.

상기 특징 정보는 원본 이미지의 패턴 정보, 특정 좌표와 해당 좌표에서의 색상값의 배열 정보, 특정 좌표 및 해당 좌표에서의 색상값 정보, 원본 이미지에 포함되어 있는 텍스트 정보 및 코드화 정보 중 적어도 어느 하나를 포함할 수 있다.The feature information may include at least one of pattern information of an original image, arrangement information of color values at specific coordinates and corresponding coordinates, color value information at specific coordinates and corresponding coordinates, text information included in the original image, .

상기 인증값은 특징정보를 해쉬한 값 또는 특징정보를 해쉬한 값을 사용자의 개인키로 암호화한 값일 수 있다.The authentication value may be a value obtained by hashing the feature information or a value obtained by encrypting the value obtained by hashing the feature information with the user's private key.

상기 이미지 합성 방법에 의해서 합성된 이미지의 변조 여부를 판단하는 방법은 상기 태그 정보로부터 인증값을 추출하는 제1 단계와, 상기 특징 정보에 기초한 인증값을 산출하는 제2 단계와, 상기 제1 단계의 인증값과 제2 단계의 인증값을 비교하는 제3 단계를 포함한다.A method for determining whether or not the synthesized image is modulated by the image synthesis method includes a first step of extracting an authentication value from the tag information, a second step of calculating an authentication value based on the feature information, And a third step of comparing the authentication value of the second step with the authentication value of the second step.

본 발명에 의하면, 신분증과 같은 증표상의 사진을 바꿔치기 하거나 변형시키는 등의 위변조를 손쉽게 판별할 수 있는 효과가 제공된다.According to the present invention, it is possible to easily discriminate a forgery or falsification such as swapping or altering a photograph on a token such as an ID card.

또한, 사본을 통한 원본 증표의 위변조를 판별할 수 있어 비대면 실명확인을 위한 실명확인 증표 개발에 사용할 수 있다.In addition, it can be used to identify the forgery and alteration of the original proof through the copy, and to develop the proof of blindness for the confirmation of the nonfacial blindness.

도 1은 본 발명에 의한 이미지 합성을 위한 장치의 블록도.
도 2는 본 발명에 의한 이미지 합성 과정의 흐름도.
도 3은 본 발명에 의한 이미지 위변조 판단 장치의 블록도.
도 4는 본 발명에 의한 이미지 위변조 판단 과정의 흐름도.
도 5는 이미지 특징 정보를 추출하는 위치를 설명하기 위한 도면.1 is a block diagram of an apparatus for image synthesis according to the present invention;
2 is a flowchart of an image synthesizing process according to the present invention.
3 is a block diagram of an image forgery determination apparatus according to the present invention;
4 is a flowchart of an image forgery and falsification determination process according to the present invention.
5 is a view for explaining a position at which image feature information is extracted;

이하에서는 첨부 도면을 참조하여 본 발명에 대해서 자세하게 설명한다.Hereinafter, the present invention will be described in detail with reference to the accompanying drawings.

본 명세서에서 수행되는 정보(데이터) 전송 과정은 필요에 따라서 암호화/복호화가 적용될 수 있으며, 본 명세서 및 특허청구범위에서 정보(데이터) 전송 과정을 설명하는 표현은 별도로 언급되지 않더라도 모두 암호화/복호화하는 경우도 포함하는 것으로 해석되어야 한다. 본 명세서에서 "A로부터 B로 전송(전달)" 또는 "A가 B로부터 수신"과 같은 형태의 표현은 중간에 다른 매개체가 포함되어 전송(전달) 또는 수신되는 것도 포함하며, A로부터 B까지 직접 전송(전달) 또는 수신되는 것만을 표현하는 것은 아니다. 본 발명의 설명에 있어서 각 단계의 순서는 선행 단계가 논리적 및 시간적으로 반드시 후행 단계에 앞서서 수행되어야 하는 경우가 아니라면 각 단계의 순서는 비제한적으로 이해되어야 한다. 즉 위와 같은 예외적인 경우를 제외하고는 후행 단계로 설명된 과정이 선행 단계로 설명된 과정보다 앞서서 수행되더라도 발명의 본질에는 영향이 없으며 권리범위 역시 단계의 순서에 관계없이 정의되어야 한다. 그리고 본 명세서에서 “A 또는 B”은 A와 B 중 어느 하나를 선택적으로 가리키는 것 뿐만 아니라 A와 B 모두를 포함하는 것도 의미하는 것으로 정의된다. 또한, 본 명세서에서 "포함"이라는 용어는 포함하는 것으로 나열된 요소 이외에 추가로 다른 구성요소를 더 포함하는 것도 포괄하는 의미를 가진다. 본 명세서에서 "모듈"이라 함은 범용적인 하드웨어와 그 기능을 수행하는 소프트웨어의 논리적 결합을 의미한다.Encryption / decryption may be applied to the information (data) transmission process performed in the present specification, and the description describing the process of transmitting information (data) in the present specification and claims is not limited to encryption / decryption Should be construed as including. Expressions of the form "transfer from A to B" or "receive from A" in this specification include transmission (transfer) or reception of another medium in between, It does not just represent transmission (forwarding) or receiving. In the description of the present invention, the order of each step should be understood to be non-limiting, unless the preceding step must be performed logically and temporally before the next step. That is to say, except for the exceptional cases mentioned above, even if the process described in the following stage is performed before the process described in the preceding stage, it does not affect the essence of the invention and the scope of the right should be defined regardless of the order of the stages. &Quot; A " or " B " is defined herein to mean not only selectively pointing to either A or B, but also including both A and B. It is also to be understood that the term "comprising " is intended to encompass further including other elements in addition to the elements listed as being included. As used herein, the term "module" refers to a logical combination of general purpose hardware and software that performs its functions.

도 1 및 도 2를 참조하여 본 발명에 의한 이미지 합성 방법에 대해서 설명한다. 본 명세서에서 "이미지 합성"은 원본 이미지에 후술하는 특징 정보의 인증값을 표현하는 소정의 정보(태그 정보)가 합쳐짐을 의미하며, 시각적으로 인지할 수 있는 물리적 이미지의 합성뿐만 아니라 시각적으로 인지할 수 없지만 원본 이미지 정보에 디지털 정보로 포함되는 태그 정보가 원본 이미지 정보에 합쳐지는 것도 포함한다. 원본 이미지에 인증값을 표현하는 이미지가 시각적으로 인지할 수 있는 상태로 합쳐지는 경우에 두 이미지는 근접하게 배치될 수도 있고, 또는 서로 이격되어 배치될 수도 있다.The image synthesizing method according to the present invention will be described with reference to FIGS. 1 and 2. FIG. In the present specification, "image synthesis" means that predetermined information (tag information) expressing an authentication value of feature information described later is added to an original image, and not only visual synthesis of a visually recognizable physical image, Tag information included in the original image information as digital information is included in the original image information. In the case where the image representing the authentication value in the original image is merged into a visually recognizable state, the two images may be arranged close to each other, or may be disposed apart from each other.

인증값을 표현하는 소정의 정보가 시각적으로 표현될 때에는 바코드, QR 코드 등의 이차원 코드, 스냅태그, 라이펙스 코드 등의 형태로 표현될 수도 있고, 숫자로 표현될 수도 있다.When the predetermined information expressing the authentication value is visually expressed, it may be expressed in the form of a two-dimensional code such as a barcode, a QR code, a snap tag, a license code, or the like, or may be represented by a number.

원본 이미지(1)가 정보 추출 모듈(10)로 입력되면 정보 추출 모듈(10)이 원본 이미지(1)의 특징 정보를 획득한다(200). 특징 정보는 이후에 이미지 위변조 여부를 확인하기 위한 정보로서 예를 들어 도 5에 도시된 바와 같이 특정 좌표 정보와 그 좌표에서의 색상값 정보일 수 있다. 위변조 판단의 정확성을 높이기 위해서 (좌표, 색상값) 정보는 복수 개가 추출될 수 있으며, 원본 이미지의 패턴 정보(도 5의 특정 좌표들을 연결하여 형성되는 패턴에 대한 정보), 특정 좌표와 해당 좌표에서의 색상값의 배열 정보(단순히 좌표-색상값 정보가 아니라, 좌표 및 해당 좌표에서의 색상값을 소정의 순서에 따라서 정렬한 정보), 원본 이미지에 포함되어 있는 텍스트 정보(원본 이미지에 텍스트가 포함되어 있는 경우) 또는 (QR 코드와 같은 2차원 바코드 등으로 표시되어 원본 이미지에 포함되어 있는) 코드화 정보 중 적어도 어느 하나일 수 있다.When the original image 1 is input to the information extraction module 10, the information extraction module 10 acquires the feature information of the original image 1 (200). The feature information is information for identifying whether the image is forged or forged, for example, as shown in FIG. 5, and may be specific coordinate information and color value information in the coordinates. In order to enhance the accuracy of the forgery and falsification judgment, a plurality of pieces of information (coordinate, color value) can be extracted, and pattern information of the original image (information about a pattern formed by connecting the specific coordinates in FIG. 5) (Information obtained by arranging coordinate values and color values in the coordinates in a predetermined order, not simply coordinate-color value information), text information included in the original image (including text in the original image) ) Or encoding information (represented by a two-dimensional barcode such as a QR code and included in the original image).

앞서 나열된 특징 정보는 비제한적인 의미로 해석되어야 하며 이미지의 특징을 표시할 수 있는 정보라면 어느 것이든 사용될 수 있다. 추출되는 위치(5-1 내지 5-3, 6-1 내지 6-3)는 외부에 노출되지 않도록 관리되어야 한다. 편의상 추출 위치를 6군데로 표시했지만 그 위치의 개수는 다르게 정해져도 무방하다.The feature information listed above should be interpreted in a non-limiting sense, and any information that can characterize the image can be used. The extracted positions (5-1 to 5-3, 6-1 to 6-3) should be managed so as not to be exposed to the outside. For convenience, the extraction locations are indicated at six locations, but the number of locations may be determined differently.

추출된 특징 정보는 태그 정보 생성 모듈(30)로 입력되어 태그 정보가 생성된다. 좀 더 구체적으로는, 원본 이미지의 소정의 특징 정보값를 해쉬하여 해쉬값(인증값)을 획득하고(210) 그러한 해쉬값을 표현하는 태그 정보를 생성한다(220). 인증값은 특징 정보의 해쉬값을 직접 사용할 수도 있고, 또는 해쉬값을 사용자(송신자; 원본 이미지 또는 그 사본 이미지를 전송하여 비대면 인증을 요청하는 자)의 개인키로 암호화하여 사용할 수도 있다.The extracted feature information is input to the tag information generation module 30 to generate tag information. More specifically, a hash value (authentication value) is obtained by hashing a predetermined feature information value of the original image (210), and tag information representing such a hash value is generated (220). The authentication value may directly use the hash value of the feature information, or may encrypt the hash value with the private key of the user (sender: a person who sends the original image or its copy image to request non-face authentication).

원본 이미지(1)와 태그 정보 생성 모듈(30)이 생성한 태그 정보(2)는 이미지 합성 모듈(20)에 입력되어 합성 이미지(3)로 합성된다(230). 전술한 바와 같이 태그 정보는 시각적으로 인지 가능한 형태로 표시될 수도, 시각적으로 인지 가능하지 않은 형태로도 합성될 수도 있다. 도 1에서는 편의상 원본 이미지(1)와 태그 정보(2)가 서로 인접하도록 표현되었을 뿐이다.The original image 1 and the tag information 2 generated by the tag information generation module 30 are input to the image composition module 20 and synthesized into the composite image 3 at step 230. As described above, the tag information may be displayed in a visually recognizable form or in a form that is not visually recognizable. In FIG. 1, the original image 1 and the tag information 2 are merely adjacent to each other for convenience.

도 3에는 본 발명에 의해 합성된 이미지의 위변조를 판단하는 블록도가 도시되어 있고 도 4에는 위변조 판단 과정의 흐름도가 도시되어 있다.FIG. 3 is a block diagram for explaining forgery and falsification of an image synthesized by the present invention, and FIG. 4 is a flowchart illustrating a process of forgery and falsification.

본 발명에 의한 이미지 위변조 판별 방법은 오프라인에서 사용자가 상대방에게 신분증 등의 증표를 건네서 상대방이 위변조 여부를 판단할 수도 있고, 또는 사본을 인증자에게 전송하여 비대면 실명 확인에 사용할 수도 있다. 비대면 실명 확인에 사용하는 경우에는 사용자가 신분증 등의 증표상의 합성 이미지를 촬영하여 이미지 파일로 비대면 실명 확인을 요구하는 서버에 전송하여 판별한다.In the image forgery determination method according to the present invention, a user may determine whether a user forged or falsified by handing an identification card or the like to the other party in an offline mode, or may transmit the copy to an authenticator to use for non-contact real name confirmation. In the case of using for non-face-to-face blindness confirmation, the user captures a composite image on an indicia such as an identification card and transmits it to an image file, which is transmitted to a server requesting confirmation of blindness.

원본 이미지(1)의 위변조 여부를 판별하기 위해서는 먼저 합성 이미지(3)가 정보 추출 모듈(10)로 입력된다(300). 정보 추출 모듈(10)로 입력되는 합성 이미지(3)는 실제로는 스캐너 등의 판독 장치에 위해서 판독된 이미지 또는 비대면 인증을 위해 사용자가 전송한 사본 이미지가 될 수 있다. 편의상 도 1의 합성 이미지(1)와 구별하지 아니하고 사용한다.In order to determine whether the original image 1 is forged or falsified, the composite image 3 is first input to the information extraction module 10 (300). The composite image 3 input to the information extraction module 10 may actually be an image read for a reading device such as a scanner or a copy image transmitted by a user for non-face authentication. For the sake of convenience, it is used without being distinguished from the composite image (1) of Fig.

합성 이미지(3)는 원본 이미지(1)에 시각적으로 표현된 태그 정보(2)가 합쳐진 이미지의 사본일 수도 있고, 또는 원본 이미지(1)에 시각적으로 표현된 태그 정보(2)가 합쳐진 이미지 그 자체일 수도 있다. 또는, 디지털적으로 구성된 원본 이미지(1)와 태그 정보(2)의 합성 데이터일 수도 있다.The composite image 3 may be a copy of the image in which the tag information 2 visually represented in the original image 1 is combined or an image in which the tag information 2 visually represented in the original image 1 is combined It may be itself. Alternatively, it may be composite data of the digitally configured original image 1 and the tag information 2.

정보 추출 모듈(10)은 합성 이미지에서 원본 이미지(1)의 특징 정보를 추출한다(410). 또한, 합성 이미지(3)에 포함되어 있는 태그 정보로부터 인증값을 추출하여 위변조 판단 모듈(50)로 전달한다.The information extraction module 10 extracts feature information of the original image 1 from the composite image (410). Also, the authentication value is extracted from the tag information included in the composite image 3 and transmitted to the forgery and falsification determination module 50.

추출된 특징 정보는 인증값 산출 모듈(40)로 전달되어 인증값이 산출된다(420). 단계(420)에서 산출된 인증값은 위변조 판단 모듈(50)로 전달되며, 위변조 판단 모듈(50)은 이 인증값과, 정보 추출 모듈(10)로부터 전달받은 인증값을 대비하여 원본 이미지(1)의 위변조 여부를 판단한다(430). 두 인증값이 동일하면 원본 이미지는 위변조가 되지 않은 것이며, 두 인증값이 서로 다르면 위변조가 된 것으로 판단한다.The extracted feature information is transmitted to the authentication value calculation module 40 to calculate an authentication value (420). The authentication value calculated in the step 420 is transmitted to the forgery and falsification determining module 50. The forgery and falsification determining module 50 compares the authentication value and the authentication value received from the information extraction module 10, (430). If the two authentication values are the same, the original image is not forged or modified. If the two authentication values are different from each other, it is judged that the image is forged or modified.

이상 첨부 도면을 참고하여 본 발명에 대해서 설명하였지만 본 발명의 권리범위는 후술하는 특허청구범위에 의해 결정되며 전술한 실시예 및/또는 도면에 제한되는 것으로 해석되어서는 아니된다. 그리고 특허청구범위에 기재된 발명의, 당업자에게 자명한 개량, 변경 및 수정도 본 발명의 권리범위에 포함된다는 점이 명백하게 이해되어야 한다.While the present invention has been described with reference to the accompanying drawings, it is to be understood that the scope of the present invention is defined by the claims that follow, and should not be construed as limited to the above-described embodiments and / or drawings. It is to be expressly understood that improvements, changes and modifications that are obvious to those skilled in the art are also within the scope of the present invention as set forth in the claims.

10: 정보 추출 모듈
20: 이미지 합성 모듈
30: 태그 정보 생성 모듈
40: 인증값 산출 모듈
50: 위변조 판단 모듈10: Information Extraction Module
20: image synthesis module
30: Tag information generation module
40: Authentication value calculation module
50: Forgery / False Judging Module

Claims

A method of image synthesis performed by a computer,
Comprising: a first step of acquiring feature information on a predetermined position of an original image;
A second step of calculating an authentication value based on the feature information;
A third step of generating tag information indicating the authentication value,
And a fourth step of synthesizing the tag information to an original image.
Image synthesis method.

The method according to claim 1,
The feature information may include at least one of pattern information of an original image, arrangement information of color values at specific coordinates and corresponding coordinates, color value information at specific coordinates and corresponding coordinates, text information included in the original image, Including,
Image synthesis method.

The method according to claim 1 or 2,
Wherein the authentication value is a value obtained by hashing feature information or a value obtained by hashing a feature information by using a user's private key,
Image synthesis method.

A method for determining whether or not a synthesized image is modulated by the image synthesis method according to claim 1 or 2,
A first step of extracting an authentication value from the tag information,
A second step of calculating an authentication value based on the feature information;
And a third step of comparing the authentication value of the first step with the authentication value of the second step,
Composite image reading method.