KR20200061276A - Integrity verification system, method and apparatus using artifitial intelligence based on cloud - Google Patents
Integrity verification system, method and apparatus using artifitial intelligence based on cloud Download PDFInfo
- Publication number
- KR20200061276A KR20200061276A KR1020190007377A KR20190007377A KR20200061276A KR 20200061276 A KR20200061276 A KR 20200061276A KR 1020190007377 A KR1020190007377 A KR 1020190007377A KR 20190007377 A KR20190007377 A KR 20190007377A KR 20200061276 A KR20200061276 A KR 20200061276A
- Authority
- KR
- South Korea
- Prior art keywords
- integrity verification
- integrity
- server
- request
- content
- Prior art date
Links
- 238000012795 verification Methods 0.000 title claims abstract description 274
- 238000000034 method Methods 0.000 title claims description 43
- 238000001514 detection method Methods 0.000 claims abstract description 58
- 230000004044 response Effects 0.000 claims abstract description 20
- 238000013473 artificial intelligence Methods 0.000 claims description 53
- 230000008569 process Effects 0.000 claims description 20
- 238000012545 processing Methods 0.000 claims description 14
- 230000005540 biological transmission Effects 0.000 claims description 13
- 238000007726 management method Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 6
- 230000004075 alteration Effects 0.000 description 3
- 230000015654 memory Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000000306 recurrent effect Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000006403 short-term memory Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/50—Monitoring users, programs or devices to maintain the integrity of platforms, e.g. of processors, firmware or operating systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/10—Protecting distributed programs or content, e.g. vending or licensing of copyrighted material ; Digital rights management [DRM]
- G06F21/16—Program or content traceability, e.g. by watermarking
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Computer Hardware Design (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Technology Law (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
본 발명은 무결성 검증 방법에 관한 것으로, 보다 상세하게는, 서버에 업로드된 콘텐츠의 무결성을 검증하는 방법에 관한 것이다. The present invention relates to a method for verifying integrity, and more particularly, to a method for verifying the integrity of content uploaded to a server.
최근 인터넷에서 1차 창작물에 대한 불법 도용이 심해지고 있고, 제 3 자의 영리 목적의 개인 광고 삽입 등 동영상 또는 이미지 콘텐츠에 대한 저작권 침해가 빈번하게 발생하고 있다. In recent years, illegal theft of primary creations has been increasing on the Internet, and copyright infringement of video or image content, such as insertion of personal advertisements for commercial purposes by third parties, is frequently occurring.
특히, 클라우드(cloud)와 같은 공용의 플랫폼 상에 콘텐츠를 업로드한 경우, 콘텐츠의 무결성을 담보하기는 점점 어려운 실정이다. 이와 같은 콘텐츠의 위변조를 방지하기 위해, 워터마크를 사용하는 방안에 대한 연구가 존재하지만, 이는 위변조한 범인이 누구인지 밝히기 위한 것으로 그 활용성에 한계가 있고, 애초에 워터마크를 삽입하지 않은 콘텐츠에 대해서는, 효과가 없다는 문제점이 존재한다.In particular, when content is uploaded on a common platform such as a cloud, it is increasingly difficult to secure the integrity of the content. In order to prevent such forgery of contents, there are studies on how to use watermarks, but this is to reveal who the forgery is, and there is a limit to its usefulness. However, there is a problem that there is no effect.
상술한 문제점을 해결하기 위한 본 발명의 일 양태에 따른 목적은, 무결성 검증을 위한 인공지능 무결성 검증 코어(core)를 이용하여 이미지 및 비디오 콘텐츠에 대한 유연한 검증이 가능한 클라우드 기반 인공지능을 활용한 무결성 검증 시스템을 제공하는 것이다. An object according to an aspect of the present invention for solving the above-described problem is, integrity using a cloud-based AI capable of flexible verification of images and video contents by using an AI integrity verification core for integrity verification It is to provide a verification system.
상기한 목적을 달성하기 위한 본 발명의 일 양태에 따른 무결성 검증 시스템은, 사용자 단말로부터 대상 콘텐츠에 대한 무결성 검증 요청을 수신하여 워터마크 검출 서버로 상기 대상 콘텐츠에 대한 워터마크 검출 요청을 제공하고 워터마크 검출결과를 기반으로 무결성 검증 서버로 무결성 검증 요청을 제공하는 인터페이스 서버, 상기 인터페이스 서버로부터의 요청에 대응하여 상기 대상 콘텐츠에 워터마크가 정상 검출되는지 여부를 판단하여 검출결과를 상기 인터페이스 서버로 반환하는 워터마크 검출 서버 및 상기 인터페이스 서버로부터의 무결성 검증 요청에 대응하여 상기 대상 콘텐츠의 무결성을 검증하고 검증결과를 상기 인터페이스 서버로 반환하는 무결성 검증 서버를 포함하되, 상기 인터페이스 서버는, 상기 워터마크 검출 서버로부터의 워터마크에 대한 검출결과가 워터마크가 삽입되어 있지 않음을 지시함에 대응하여 상기 무결성 검증 서버로 상기 무결성 검증 요청을 제공할 수 있다.An integrity verification system according to an aspect of the present invention for achieving the above object receives an integrity verification request for a target content from a user terminal and provides a watermark detection request for the target content to a watermark detection server An interface server that provides an integrity verification request to an integrity verification server based on a mark detection result, determines whether a watermark is normally detected in the target content in response to a request from the interface server, and returns the detection result to the interface server A watermark detection server and an integrity verification server that verifies the integrity of the target content and returns a verification result to the interface server in response to an integrity verification request from the interface server, wherein the interface server detects the watermark The integrity verification request may be provided to the integrity verification server in response to the detection result for the watermark from the server indicating that the watermark is not inserted.
상기 워터마크 검출 서버는 상기 대상 콘텐츠에 연성 워터마크(fragile watermark)가 존재하는지 여부를 검출하여 판단결과를 상기 인터페이스 서버에 제공하고, 상기 인터페이스 서버는 연성 워터마크가 정상적으로 검출됨에 대응하여, 상기 무결성 검증 서버로의 무결성 검증 요청 없이, 직접적으로 무결성 검증 결과를 상기 사용자 단말로 제공할 수 있다.The watermark detection server detects whether a soft watermark exists in the target content and provides a determination result to the interface server, and the interface server responds to the soft watermark being normally detected, and thus the integrity Without verifying the integrity verification request to the verification server, the integrity verification result can be directly provided to the user terminal.
상기 무결성 검증 서버는 비디오 인공지능 무결성 검증 코어 및 이미지 인공지능 무결성 검증 코어 중 적어도 하나를 이용하여 상기 대상 콘텐츠에 대한 무결성을 검증할 수 있다.The integrity verification server may verify the integrity of the target content using at least one of a video AI integrity verification core and an image AI integrity verification core.
상기 무결성 검증 서버는, 복수의 무결성 검증 요청들을 상기 무결성 검증 서버와 연관된 저장소에 존재하는 스케쥴링 큐(scheduling queue)에 저장하고 스케쥴링 큐에 저장된 순서대로 상기 복수의 무결성 검증 요청들을 처리할 수 있다.The integrity verification server may store a plurality of integrity verification requests in a scheduling queue existing in a storage associated with the integrity verification server and process the plurality of integrity verification requests in the order stored in the scheduling queue.
상기 무결성 검증 서버는, 상기 스케쥴링 큐에 저장된 작업을 순서대로 처리하기 위해 복수의 쓰레드(thread)를 이용하여 병렬적으로 처리할 수 있다.The integrity verification server may process in parallel using a plurality of threads in order to process jobs stored in the scheduling queue in order.
상기 무결성 검증 서버는, 상기 인터페이스 서버로부터 무결성 검증 요청을 수신하여 저장소에 저장하고 상기 대상 콘텐츠를 다운로드 대기 상태로 변경하는 요청 수신 모듈, 상기 저장소에 콘텐츠 다운로드 대기 작업이 있는지 판단하여 판단 결과에 따라 상기 대상 콘텐츠를 다운로드하고 무결성 판단 대기 상태로 변경하는, 콘텐츠 관리 모듈, 상기 저장소에 무결성 판단 대기 작업이 있는지 판단하여 상기 비디오 인공지능 무결성 검증 코어 및 상기 이미지 인공지능 무결성 검증 코어 중 적어도 하나를 이용하여 상기 대상 콘텐츠의 무결성을 검증하는, 무결성 판단 모듈 및 상기 무결성 판단 모듈에서의 무결성 검증 결과를 상기 인터페이스 서버로 제공하는 검증 결과 전송 모듈을 포함할 수 있다.The integrity verification server receives a request for integrity verification from the interface server, stores it in a storage, and receives a request module for changing the target content to a download standby state, determines whether there is a task to wait for content download in the storage, and according to the determination result The content management module, which downloads target content and changes it to a standby state for integrity determination, determines whether there is an operation for waiting for integrity determination in the storage, and uses at least one of the video AI integrity verification core and the image AI integrity verification core. An integrity determination module for verifying the integrity of the target content, and a verification result transmission module for providing the integrity verification result in the integrity determination module to the interface server.
상기 비디오 인공지능 무결성 검증 코어와 상기 이미지 인공지능 무결성 검증 코어는, 상기 대상 콘텐츠의 위변조가 발생되어 상기 대상 콘텐츠의 원본 부분과의 차이가 나는 부분을 추출하여 학습하되, 상기 비디오 인공지능 무결성 검증 코어와 상기 이미지 인공지능 무결성 검증 코어는 독립적으로 학습이 이루어질 수 있다.The video artificial intelligence integrity verification core and the image artificial intelligence integrity verification core extract and learn a part in which the forgery of the target content occurs and a difference from the original part of the target content is extracted, but the video artificial intelligence integrity verification core And the image artificial intelligence integrity verification core can be independently learned.
상기 비디오 인공지능 무결성 검증 코어와 상기 이미지 인공지능 무결성 검증 코어는, 상기 차이가 나는 부분을 추출하여 학습된 데이터를 기반으로, 위변조와 관련된 공격이 진행되는 위치, 상기 공격의 형태, 및 상기 공격이 이루어진 콘텐츠의 속성, 상기 공격이 이루어진 콘텐츠의 속성과 공격 위치의 대응관계, 및 상기 공격이 이루어진 콘텐츠의 속성과 공격의 형태에 대한 대응관계를 학습할 수 있다.The video AI integrity verification core and the image AI integrity verification core, based on the learned data by extracting the difference, the location where the forgery-related attack proceeds, the type of attack, and the attack It is possible to learn the properties of the content made, the relationship between the property of the attacked content and the location of the attack, and the property of the attacked content and the correspondence to the form of the attack.
상기 요청 수신 모듈, 상기 콘텐츠 관리 모듈, 상기 무결성 판단 모듈 및 상기 검증 결과 전송 모듈은 작업 쓰레드의 갯수, 상기 인터페이스 서버와의 연결 설정 값을 가지며, 상기 작업 쓰레드의 갯수 및 상기 연결 설정 값은 상기 무결성 검증 서버의 상태에 따라 실시간으로 변경될 수 있다.The request receiving module, the content management module, the integrity determination module and the verification result transmission module have a number of work threads, a connection setting value with the interface server, and the number of work threads and the connection setting value are the integrity It can be changed in real time depending on the status of the verification server.
상기 무결성 검증 서버는 상기 인터페이스 서버로부터 요청 받은 모든 무결성 검증 요청과 연관된 작업의 현재 상태 및 완료 내역을 상기 저장소에 테이블 형태로 기록할 수 있다.The integrity verification server may record the current state and completion details of the tasks associated with all the integrity verification requests requested from the interface server in the form of a table in the storage.
상기한 목적을 달성하기 위한 본 발명의 일 양태에 따른 무결성 검증 방법은, 인터페이스 서버가 사용자 단말로부터 대상 콘텐츠에 대한 무결성 검증 요청을 수신하는 단계, 상기 인터페이스 서버가, 상기 수신된 무결성 검증 요청에 대응하여 워터마크 검출 서버로 상기 대상 콘텐츠에 대한 워터마크 검출요청을 제공하는 단계, 상기 워터마크 검출 서버가, 상기 인터페이스 서버로부터의 요청에 대응하여 상기 대상 콘텐츠에 워터마크가 정상 검출되는지 여부를 판단하여 워터마크 검출결과를 상기 인터페이스 서버로 반환하는 단계, 상기 인터페이스 서버가, 상기 반환된 검출결과를 기반으로 무결성 검증 서버로 무결성 검증 요청을 제공하는 단계, 및 상기 무결성 검증 서버가, 상기 인터페이스 서버로부터의 무결성 검증 요청에 대응하여 상기 대상 콘텐츠의 무결성을 검증하고 검증결과를 상기 인터페이스 서버로 반환하는 단계를 포함하되, 상기 인터페이스 서버는, 상기 워터마크 검출 서버로부터의 워터마크에 대한 검출결과가 워터마크가 삽입되어 있지 않음을 지시함에 대응하여 상기 무결성 검증 서버로 상기 무결성 검증 요청을 제공할 수 있다.An integrity verification method according to an aspect of the present invention for achieving the above object comprises: an interface server receiving an integrity verification request for a target content from a user terminal, and the interface server responds to the received integrity verification request And providing a watermark detection request for the target content to the watermark detection server. The watermark detection server determines whether or not a watermark is normally detected in the target content in response to a request from the interface server. Returning a watermark detection result to the interface server, the interface server providing an integrity verification request to an integrity verification server based on the returned detection result, and the integrity verification server receives from the interface server And verifying the integrity of the target content in response to an integrity verification request and returning the verification result to the interface server, wherein the interface server has a watermark of the detection result for the watermark from the watermark detection server. In response to indicating that it is not inserted, the integrity verification request may be provided to the integrity verification server.
상기한 목적을 달성하기 위한 본 발명의 일 양태에 따른 무결성 검증 장치는, 클라우드 서버로부터 무결성 검증 요청을 수신하여 저장소에 저장하고, 무결성 검증의 대상이 되는 대상 콘텐츠를 다운로드 대기상태로 변경하는 요청 수신 모듈, 상기 저장소에 콘텐츠 다운로드 대기 작업이 있는지 판단하고, 상기 판단결과에 따라 상기 대상 콘텐츠를 다운로드하고 무결성 판단 대기 상태로 변경하는 콘텐츠 관리 모듈, 상기 저장소에 무결성 판단 대기 작업이 있는지 판단하여 상기 비디오 인공지능 무결성 검증 코어 및 상기 이미지 인공지능 무결성 검증 코어 중 적어도 하나를 이용하여 상기 대상 콘텐츠의 무결성을 검증하는, 무결성 판단 모듈 및 상기 무결성 판단 모듈에서의 무결성 검증 결과를 상기 클라우드 서버로 제공하는 검증 결과 전송 모듈을 포함할 수 있다.The integrity verification apparatus according to an aspect of the present invention for achieving the above object receives an integrity verification request from a cloud server, stores it in a storage, and receives a request to change the target content subject to integrity verification to a download standby state Module, a content management module that determines whether there is a job waiting to download content in the storage, downloads the target content according to the determination result, and changes the status to a waiting status for integrity determination. A verification result transmission that provides an integrity determination module and an integrity verification result in the integrity determination module to the cloud server, which verifies the integrity of the target content using at least one of an intelligent integrity verification core and the image artificial intelligence integrity verification core It may include modules.
상기 비디오 인공지능 무결성 검증 코어와 상기 이미지 인공지능 무결성 검증 코어는, 상기 대상 콘텐츠의 위변조가 발생되어 상기 대상 콘텐츠의 원본 부분과의 차이가 나는 부분을 추출하여 학습하되, 상기 비디오 인공지능 무결성 검증 코어와 상기 이미지 인공지능 무결성 검증 코어는 독립적으로 학습이 이루어질 수 있다.The video artificial intelligence integrity verification core and the image artificial intelligence integrity verification core extract and learn a part in which the forgery of the target content occurs and a difference from the original part of the target content is extracted, but the video artificial intelligence integrity verification core And the image artificial intelligence integrity verification core can be independently learned.
상기 비디오 인공지능 무결성 검증 코어와 상기 이미지 인공지능 무결성 검증 코어는, 상기 차이가 나는 부분을 추출하여 학습된 데이터를 기반으로, 위변조와 관련된 공격이 진행되는 위치, 상기 공격의 형태, 및 상기 공격이 이루어진 콘텐츠의 속성, 상기 공격이 이루어진 콘텐츠의 속성과 공격 위치의 대응관계, 및 상기 공격이 이루어진 콘텐츠의 속성과 공격의 형태에 대한 대응관계를 학습할 수 있다.The video AI integrity verification core and the image AI integrity verification core, based on the learned data by extracting the difference, the location where the forgery-related attack proceeds, the type of attack, and the attack It is possible to learn the properties of the content made, the relationship between the property of the attacked content and the attack location, and the property of the attacked content and the correspondence to the form of the attack.
상기 요청 수신 모듈, 상기 콘텐츠 관리 모듈, 상기 무결성 판단 모듈 및 상기 검증 결과 전송 모듈은 작업 쓰레드의 갯수, 상기 클라우드 서버와의 연결 설정 값을 가지며, 상기 작업 쓰레드의 갯수 및 상기 연결 설정 값은 상기 무결성 검증 서버의 상태에 따라 실시간으로 변경될 수 있다.The request receiving module, the content management module, the integrity determination module and the verification result transmission module have a number of work threads, a connection setting value with the cloud server, and the number of work threads and the connection setting value are the integrity It can be changed in real time depending on the status of the verification server.
상기 무결성 검증 서버는 상기 클라우드 서버로부터 요청 받은 모든 무결성 검증 요청과 연관된 작업의 현재 상태 및 완료 내역을 상기 저장소에 테이블 형태로 기록할 수 있다.The integrity verification server may record the current state and completion details of the tasks associated with all the integrity verification requests requested from the cloud server in a table format in the storage.
복수의 무결성 검증 요청들을 상기 저장소에 존재하는 스케쥴링 큐(scheduling queue)에 저장하고 스케쥴링 큐에 저장된 순서대로 상기 복수의 무결성 검증 요청들을 처리할 수 있다.A plurality of integrity verification requests may be stored in a scheduling queue existing in the storage, and the plurality of integrity verification requests may be processed in the order stored in the scheduling queue.
상기 스케쥴링 큐에 저장된 작업을 순서대로 처리하기 위해 복수의 쓰레드(thread)를 이용하여 병렬적으로 처리할 수 있다.In order to process the jobs stored in the scheduling queue in order, they can be processed in parallel using a plurality of threads.
상기한 목적을 달성하기 위한 본 발명의 다른 양태에 따른 무결성 검증 방법은, 클라우드 서버로부터 무결성 검증 요청을 수신하여 저장소에 저장하는 단계, 상기 저장된 무결성 검증 요청과 연관된 대상 콘텐츠를 다운로드 대기상태로 변경하는 단계, 상기 저장소에 콘텐츠 다운로드 대기 작업이 있는지 판단하여 상기 대상 콘텐츠를 다운로드하고 무결성 판단 대기 상태로 변경하는 단계, 상기 저장소에 무결성 판단 대기 작업이 있는지 판단하여 상기 비디오 인공지능 무결성 검증 코어 및 상기 이미지 인공지능 무결성 검증 코어 중 적어도 하나를 이용함에 의해 상기 대상 콘텐츠의 무결성을 검증하는 단계 및 무결성 검증 결과를 클라우드 서버로 제공하는 단계를 포함할 수 있다.An integrity verification method according to another aspect of the present invention for achieving the above object comprises receiving an integrity verification request from a cloud server and storing it in a storage, changing a target content associated with the stored integrity verification request to a download standby state Step, determining whether there is a job waiting to download content in the storage and downloading the target content and changing the status to a waiting status for integrity determination, determining whether there is a waiting job to determine integrity in the storage, the video AI integrity verification core and the image artificiality It may include the step of verifying the integrity of the target content by using at least one of the intelligent integrity verification core and providing the integrity verification result to the cloud server.
본 발명의 클라우드 기반 인공지능을 활용한 무결성 검증 시스템에 따르면, 1차 창작물에 대한 저작권 오남용을 방지하고, 클라우드와 워터마크 시스템을 이용하기에, 타 검증 시스템보다 개인 및 기업 입장에서 사용하기가 편리하며, 워터마크의 검출 및 인공지능 기술을 이용하여 무결성을 검증하기 대문에, 데이터가 축적될수록 다양한 케이스에 대한 신뢰성 있는 검증 결과를 도출가능한 효과가 있다.According to the integrity verification system utilizing the cloud-based artificial intelligence of the present invention, it is more convenient to use from the standpoint of individuals and companies than other verification systems to prevent abuse of copyright for the primary creation and to use the cloud and watermark system. In addition, since the integrity is verified using the detection of watermark and artificial intelligence technology, as data is accumulated, there is an effect capable of deriving reliable verification results for various cases.
도 1은 본 발명의 일 실시예에 따른 무결성 검증 시스템을 개략적으로 나타낸 개념도,
도 2는 본 발명의 일 실시예에 따른 무결성 검증 시스템의 인터페이스 서버의 동작을 나타낸 흐름도,
도 3은 본 발명의 일 실시예에 따른 무결성 검증 시스템의 동작 흐름을 구체적으로 나타낸 상세흐름도,
도 4는 본 발명의 일 실시예에 따른 무결성 검증 시스템의 무결성 검증 서버의 구성을 나타낸 블록도,
도 5는 도 4의 무결성 검증 서버의 각 구성의 동작을 흐름순으로 구체적으로 나타낸 상세흐름도,
도 6은 도 4의 무결성 검증 서버의 무결성 검증 코어에서의 인공지능 학습 과정을 개략적으로 나타낸 개념도이다.1 is a conceptual diagram schematically showing an integrity verification system according to an embodiment of the present invention;
Figure 2 is a flow chart showing the operation of the interface server of the integrity verification system according to an embodiment of the present invention,
3 is a detailed flow chart specifically showing the operation flow of the integrity verification system according to an embodiment of the present invention,
Figure 4 is a block diagram showing the configuration of the integrity verification server of the integrity verification system according to an embodiment of the present invention,
FIG. 5 is a detailed flow chart specifically showing the operation of each configuration of the integrity verification server of FIG. 4 in flow order;
6 is a conceptual diagram schematically showing an artificial intelligence learning process in the integrity verification core of the integrity verification server of FIG. 4.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다.The present invention can be applied to various changes and can have various embodiments, and specific embodiments will be illustrated in the drawings and described in detail.
그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.However, this is not intended to limit the present invention to specific embodiments, and should be understood to include all modifications, equivalents, and substitutes included in the spirit and scope of the present invention.
제 1, 제 2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성요소는 제 2 구성요소로 명명될 수 있고, 유사하게 제 2 구성요소도 제 1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.Terms such as first and second may be used to describe various components, but the components should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from other components. For example, the first component may be referred to as a second component without departing from the scope of the present invention, and similarly, the second component may be referred to as a first component. The term and/or includes a combination of a plurality of related described items or any one of a plurality of related described items.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. When an element is said to be "connected" or "connected" to another component, it is understood that other components may be directly connected to or connected to the other component, but there may be other components in between. It should be. On the other hand, when a component is said to be "directly connected" or "directly connected" to another component, it should be understood that no other component exists in the middle.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in the present application are only used to describe specific embodiments, and are not intended to limit the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this application, terms such as “include” or “have” are intended to indicate the presence of features, numbers, steps, actions, components, parts, or combinations thereof described in the specification, one or more other features. It should be understood that the existence or addition possibilities of fields or numbers, steps, operations, components, parts or combinations thereof are not excluded in advance.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가진 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless otherwise defined, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by a person skilled in the art to which the present invention pertains. Terms such as those defined in a commonly used dictionary should be interpreted as having meanings consistent with meanings in the context of related technologies, and should not be interpreted as ideal or excessively formal meanings unless explicitly defined in the present application. Does not.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 본 발명을 설명함에 있어 전체적인 이해를 용이하게 하기 위하여 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다. Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. In order to facilitate the overall understanding in describing the present invention, the same reference numerals are used for the same components in the drawings, and duplicate descriptions for the same components are omitted.
도 1은 본 발명의 일 실시예에 따른 무결성 검증 시스템을 개략적으로 나타낸 개념도이다. 도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 무결성 검증 시스템은 인터페이스 서버(120), 워터마크 검증 서버(130) 및 무결성 검증 서버(140)를 포함할 수 있다.1 is a conceptual diagram schematically showing an integrity verification system according to an embodiment of the present invention. As shown in FIG. 1, the integrity verification system according to an embodiment of the present invention may include an
도 1을 참조하면, 사용자(110)는 사용자 단말을 이용하여 콘텐츠를 업로드 할 수 있다. 사용자(110)는 스마트폰 또는 개인 PC 단말을 이용하여 클라우드 서버로 제보 콘텐츠를 업로드할 수 있다. 제보 콘텐츠는 무결성 검증 대상이 되는 콘텐츠를 나타낸다. 제보 콘텐츠는 "대상 콘텐츠"라고 불릴 수 있다. 제보는 스마트폰용 또는 PC용 제보 애플리케이션(application)을 이용하여 이루어질 수 있다. 여기서, 클라우드 서버는 클라우드 내에 포함된 서버들 또는 그들 중 하나로, 인터페이스 서버(120), 워터마크 검출 서버(130) 및 무결성 검증 서버(140) 중 적어도 하나를 포함할 수 있다. 다만, 반드시 위 세 개의 서버들(120, 130, 140)만을 지칭하는 것은 아니다. 웹 상의 다른 서버를 지칭할 수 있다. 클라우드 서버는 자체 저장소 또는 연결되어 있는 대용량 데이터베이스 상에, 업로드된 콘텐츠를 저장할 수 있다. Referring to FIG. 1, the user 110 may upload content using a user terminal. The user 110 may upload the tip content to the cloud server using a smartphone or a personal PC terminal. The reporting content represents content subject to integrity verification. The reporting content may be referred to as "target content". The report may be made using a report application for a smartphone or a PC. Here, the cloud server may include at least one of the servers included in the cloud or one of them, the
사용자 단말을 통해 제보 콘텐츠가 업로드되면, 인터페이스 서버(120)는 워터마크 검출 서버(130)로 워터마크의 검출을 요청한다. 인터페이스 서버(120)는 클라우드와 사용자 단말 간의 인터페이스 역할을 하는 서버 장치이다. 앞서 설명한 바오 같이, 본 명세서 상에서 클라우드 서버는 인터페이스 서버(120)를 지칭할 수도 있고, 또는, 인터페이스 서버(120)와 인터넷 상으로 연결된 다른 서버 장치를 지칭할 수도 있다. 또한, 인터페이스 서버(120)는 워터마크 검출 서버(130)와 무결성 검증 서버(140) 간의 인터페이스 역할도 함께 수행한다.When the tip content is uploaded through the user terminal, the
인터페이스 서버(120)로부터의 워터마크 검출 요청에 대응하여, 워터마크 검출 서버(130)는 제보 콘텐츠 내에 삽입된 연성 워터마크(fragile watermark)를 검출하고, 검출결과를 인터페이스 서버(120)로 제공한다. 연성 워터마크는 위변조와 같은 공격을 받으면 쉽게 손상되어 그 공격이 있었다는 사실, 공격받은 위치 및 공격의 형태 등에 대한 정보를 제공하는 워터마크이다. In response to a watermark detection request from the
워터마크 검출 서버(130)는 내부 또는 외부의 데이터베이스(135)와 연동할 수 있다. 이때, 데이터베이스(135)에는 워터마크의 검출 이력 데이터가 저장되고, 서버(130)는 워터마크 검출 이력을 데이터베이스(135)를 이용하여 관리할 수 있다. The
인터페이스 서버(120)는 워터마크 검출 결과를 기반으로 무결성 검증 서버(140)로 무결성 검증 요청을 전송할지 판단한다. 이때, 인터페이스 서버(120)는 연성 워터마크가 정상적으로 검출되면, 무결성 검증 서버(140)로의 무결성 검증 요청을 전송하지 않고, 바로 사용자 단말로 무결성 검증 결과를 제공한다. 이때, 인터페이스 서버(120)가 제공하는 무결성 검증 결과는 제보 콘텐츠는 정상적이며, 무결하다는 결과가 된다. The
만약, 제보 콘텐츠에 내에 워터마크가 없거나, 연성 워터마크가 조작되거나 또는 깨져 있는 상태라면, 인터페이스 서버(120)는 워터마크의 정상적인 검출이 아니라고 판단하고, 무결성 검증 서버(140)로 무결성 검증 요청을 전송한다. If there is no watermark in the reported content, or if the soft watermark is manipulated or broken, the
무결성 검증 서버(140)는 인공지능(AI) 기반의 무결성 검증 코어(core)를 이용하여 콘텐츠의 무결성을 검증하는 서버이다. 무결성 검증 코어는 무결성 검증 서버(140)는 내부에 위치할 수 있다. 무결성 검증 코어는 비디오 기반의 인공지능 무결성 검증 코어와 이미지 기반의 인공지능 무결성 검증 코어를 포함한다. 서버(140)는 두 개의 인공지능 코어를 이요하여 이미지와 비디오 콘텐츠에 대한 유연한 무결성 검증을 수행할 수 있다. 무결성 검증 결과는 인터페이스 서버(120)로 반환되어, 사용자 단말에게 전달된다. 이때, 무결성 검증 요청부터 요청에 대응한 무결성 검증 과정 및 결과를 무결성 검증 서버(140)의 내부 및/또는 외부에 연결된 데이터베이스(145)에 저장한다. The
인터페이스 서버(120), 워터마크 검출 서버(130) 및 무결성 검증 서버(140)는 공통의 데이터베이스와 연결되어 상기 공통의 데이터베이스에 요청 수신 이력, 워터마크 검출 이력 및 무결성 검증 과정 및 결과와 연관된 이력을 저장할 수 있다. 이때, 위와 같은 히스토리 데이터는 테이블 형태로 정렬되어 저장될 수 있다.The
본 발명의 실시예에 따르면, 무결성 검증 시스템은 클라우드 서버 대신 저작물 관리 시스템(CMS: Copyright Management System)으로 대체가 가능하다. 이 경우, 별도의 웹 사이트를 구성하여 특정 회원을 대상으로 서비스를 제공할 수 있다. 기업 같은 특정 단체의 콘텐츠 관리 방법으로는 저작물 관리 시스템으로써 본 발명의 일 실시예에 따른 무결성 검증 시스템을 활용하는 것이 적절하다. 이 경우도 클라우드 서버와 마찬가지로 무결성 검증 서버와 인터페이스를 통해 무결성 검증이 이루어질 수 있다. According to an embodiment of the present invention, the integrity verification system can be replaced with a copyright management system (CMS) instead of a cloud server. In this case, a separate website can be configured to provide services to specific members. It is appropriate to utilize the integrity verification system according to an embodiment of the present invention as a work management system as a content management method of a specific organization such as a company. In this case, like the cloud server, integrity verification can be performed through an interface with the integrity verification server.
도 2는 본 발명의 일 실시예에 따른 무결성 검증 시스템의 인터페이스 서버의 동작을 나타낸 흐름도이다. 2 is a flowchart illustrating the operation of the interface server of the integrity verification system according to an embodiment of the present invention.
도 2를 참조하면, 인터페이스 서버는 제보 콘텐츠에 대한 업로드에 대응하여, 워터마크 검출 서버로 워터마크 검출을 요청한다(S210). 그리고는, 검출결과를 확인한다(S212). 검출 결과, 제보 대상 콘텐츠에 대해 연성 워터마크 검출이 정상적으로 되었는지 판단하여(S214), 정상검출의 경우, 제보자에게 직접 검증결과를 통보한다(S220). 검출이 되지 않았거나, 워터마크가 손상되는 등의 조작이 존재하는 경우엔 무결성 검증 서버로 무결성 검증 요청을 전송한다(S216). 그리고는, 무결성 검증 서버로부터의 대상 콘텐츠에 대한 무결성 검증 결과를 수신하여(S218), 제보자에게 통보한다(S220). Referring to FIG. 2, the interface server requests watermark detection from the watermark detection server in response to the upload of the reported content (S210 ). Then, the detection result is checked (S212). As a result of the detection, it is determined whether the soft watermark detection is normally performed for the content to be reported (S214), and in the case of normal detection, the verification result is directly notified to the reporter (S220). If there is an operation that is not detected or the watermark is damaged, the integrity verification request is transmitted to the integrity verification server (S216). Then, the integrity verification result of the target content from the integrity verification server is received (S218), and the reporter is notified (S220).
도 3은 본 발명의 일 실시예에 따른 무결성 검증 시스템의 동작 흐름을 구체적으로 나타낸 상세흐름도이다. Figure 3 is a detailed flow chart showing the operation flow of the integrity verification system according to an embodiment of the present invention in detail.
도 3을 참조하면, 인터페이스 서버(310)는 제보 콘텐츠가 업로드되면, 워터마크 검출 서버(320)로 워터마크에 대한 검출을 요청한다(S310). 워터마크 검출 서버(320)는 대상 콘텐츠에 연성 워터마크가 삽입되어 있는지 검출한다(S312). 그리고는, 무터마크 검출 결과를 인터페이스 서버(310)로 제공한다(S314). 이때, 워터마크가 대상 콘텐츠 내에 삽입되어 있는 경우, 제보자에게 바로 무결성 검증 결과를 전송하며, 삽입되어 있지 않는 경우, 무결성 검증 서버(330)로 대상 콘텐츠에 대한 무결성 검증 요청을 전송한다(S316). 무결성 검증 서버(330)는 인공지능 무결성 검증 코어를 통해 무결성 검증을 진행한 뒤(S318), 그 결과를 다시 인터페이스 서버(310)로 전송한다(S320). 무결성이 입증된 콘텐츠에 대해 인터페이스 서버(310)는 무결성 검증 결과를 사용자에게 전송한다.Referring to FIG. 3, when the reported content is uploaded, the
도 4는 본 발명의 일 실시예에 따른 무결성 검증 시스템의 무결성 검증 서버의 구성을 나타낸 블록도이다. 도 4에 도시된 바와 같이, 본 발명의 일 실시예에 따른 무결성 검증 서버는 요청 수신 모듈(410), 콘텐츠 관리 모듈(420), 무결성 판단 모듈(430) 및 검증 결과 전송 모듈(440)을 포함한다. 각 구성요소들은 메모리(미도시)에 저장된 프로그램에 의해 특정 기능을 수행하며, 구성요소 하나 또는 복수의 구성요소들은 마이크로-프로세서(micro-processor)로 하드웨어적으로 구현될 수 있다. 4 is a block diagram showing the configuration of an integrity verification server in an integrity verification system according to an embodiment of the present invention. 4, the integrity verification server according to an embodiment of the present invention includes a
도 4를 참조하면, 요청 수신 모듈(410)은 인터페이스 서버로부터 무결성 검증 요청을 수신한다. 무결성 검증 요청은 대상 콘텐츠에 대한 식별정보를 포함한다.4, the
콘텐츠 관리 모듈(420)은 요청 수신 모듈(410)에서 수신된 무결성 검증 요청의 대상 콘텐츠에 대한 식별정보를 기반을 해당 콘텐츠를 클라우드(예컨대, 인터페이스 서버)로부터 다운로드한다. The
무결성 판단 모듈(430)은 콘텐츠 관리 모듈(420)에서 다운로드한 대상 콘텐츠에 대한 무결성을 판단한다. 무결성 판단 모듈(430)은 비디오 인공지능 무결성 검증 코어 및 이미지 인공지능 무결성 검증 코어를 포함한다. 비디오 인공지능 무결성 검증 코어는 비디오 콘텐츠에서 무결성 검증을 수행하는 프로세서이고, 이미지 인공지능 무결성 검증 코어는 이미지 콘텐츠에서 무결성 검증을 수행하는 프로세서이다. 비디오 인공지능 무결성 검증 코어 및 이미지 인공지능 무결성 검증 코어는 각각 인공지능 모델을 기반으로 동작하기 때문에, 무결성 검증 결과가 축적되면서 보다 정밀하고 효율적인 무결성 검증을 수행할 수 있다. 여기서 사용되는 인공지능 모델은 CNN(Convolutional Neural Network), DNN(Deep Neural Network), RNN(Recurrent Neural Network) 및 LSTM(Long Short Term Memory Network) 및 GRUs(Gated Recurrent Units) 알고리즘 중 적어도 하나를 포함할 수 있다.The
검증 결과 전송 모듈(440)은 무결성 판단 모듈(430)에서의 무결성 검증 결과를 인터페이스 서버로 전송한다. The verification
각각의 모듈들은 독립적으로 작업이 진행된다. 즉, 무결성 검증 서버는 검증 요청, 콘텐츠 관리, 무결성 판단 및 결과 전송의 역할이 나뉘어져 있고, 이를 처리하는 각각의 모듈들이 데이터베이스와 직접 연동하면서 작업을 처리하기 때문에, 예기치 않은 오류가 발생했을 경우, 유지 보수 및 오류 확인이 용이하다. 즉, 각 모듈별로 데이터베이스에 저장된 작업의 상태를 확인하여 순서대로 작업을 처리한다. 각각의 모듈은 작업 쓰래드(thread)의 갯수, 인터페이스와의 연결 설정 값을 가질 수 있다. 이는 서버 상태에 따라 변경될 수 있다. 또는, 관리자의 설정에 의해 실시간으로 변경될 수 있다. 상기 검증 프로그램에 사용되는 모든 설정 값은 데이터베이스에 저장 및 로딩된다. Each module works independently. That is, the integrity verification server is divided into the roles of verification request, content management, integrity determination, and result transmission, and each module that handles this process works directly with the database, so if an unexpected error occurs, maintenance is maintained. Easy maintenance and error checking. That is, each module checks the status of jobs stored in the database and processes the jobs in order. Each module can have the number of work threads and connection settings with the interface. This can be changed depending on the server status. Alternatively, it may be changed in real time by the administrator's settings. All setting values used in the verification program are stored and loaded in the database.
이하, 각 모듈들 간에 어떠한 정보를 주고 받으며 무결성 검증 작업을 진행하는지 도 5를 통해 보다 상세히 설명한다.Hereinafter, it will be described in more detail with reference to FIG. 5 what information is exchanged between the modules and the integrity verification operation.
도 5는 도 4의 무결성 검증 서버의 각 구성의 동작을 흐름순으로 구체적으로 나타낸 상세흐름도이다. FIG. 5 is a detailed flow chart showing in detail the operation of each configuration of the integrity verification server of FIG. 4 in flow order.
도 5를 참조하면, 요청 수신 모듈(510)은 인터페이스 서버로부터 대상 콘텐츠에 대한 무결성 검증 요청을 수신한다(S510). 요청 수신 모듈(510)은 수신된 요청 작업 정보를 데이터베이스에 저장한다(S512). 그리고는, 요청 작업과 연관된 콘텐츠를 다운로드할 수 있도록 다운로드 대기 상태로 변경한다(S514). 5, the
콘텐츠 관리 모듈(512)은 데이터베이스를 모니터링하다가, 데이터베이스에 콘텐츠 다운로드 대기 작업이 있는지 확인하여, 대기작업이 존재할 경우, 클라우드로부터 콘텐츠를 로컬 저장소(예컨대, 내부 데이터베이스)에 다운로드한다(S516). 그리고는, 다운로드가 완료되면 무결성 판단을 위해 판단 준비 상태로 장치의 상태를 변경한다(S518). The content management module 512 monitors the database, checks whether there is a job waiting to download the content in the database, and if the waiting job exists, downloads the content from the cloud to a local storage (eg, an internal database) (S516). Then, when the download is completed, the state of the device is changed to a judgment ready state for integrity determination (S518).
무결성 판단 모듈(530)은 데이터베이스에 무결성 판단 대기 작업이 있는지 판단하여, 판단 대기 작업이 있으면, 무결성 판단을 진행한다. 무결성 검증 부분과 관련하여, 무결성 검증 서버는 검증 요청 받은 작업을 데이터베이스에 있는 스케줄링 큐(scheduling queue)에 쌓아 스케줄링 형식으로 처리한다. 무결성 판단 모듈(530)은 스케줄링 큐에 쌓여있는 작업을 순서대로 처리하되, 복수 개의 쓰레드를 이용하여 멀티 프로세스로 작업을 병렬처리할 수 있다. 쓰레드의 갯수는 서버가 일괄적으로 처리할 수 있는 작업의 양에 비례하기 때문에, 서버 메모리 사양에 따라 달라질 수 있다.The
그리고는, 무결성 판단 모듈(530)은 검증방법을 동영상 검증 및 이미지 검증 중 하나로 결정한다(S520). 이는 콘텐츠의 속성에 따라 결정될 수 있다. 그리고는, 결정된 검증 방법을 사용하여 콘텐츠의 무결성을 검증한다(S522). 예컨대, 콘텐츠가 비디오 콘텐츠인 경우, 비디오 인공지능 무결성 검증 코어를 이용하여 무결성을 검증하고, 콘텐츠가 이미지 콘텐츠인 경우, 이미지 인공지능 무결성 검증 코어를 이용하여 무결성을 검증할 수 있다. 인공지능 무결성 검증 코어의 학습 및 검증 방법은 도 6을 통해 보다 상세히 설명한다.Then, the
비디오 또는 이미지 인공지능 무결성 검증 코어에서의 무결성 검증 결과는 데이터베이스에 저장된다(S524). 그리고는, 무결성 검증 결과를 전송 대기 상태로 변경한다(S526). The integrity verification result in the video or image AI integrity verification core is stored in a database (S524). Then, the integrity verification result is changed to a transmission waiting state (S526).
검증 결과 전송 모듈(540)은 데이터베이스에 결과 전송 대기 작업이 있는지 확인하여, 대기 작업이 있으면, 해당 무결성 검증 결과를 인터페이스 서버로 전송한다(S528). 이때, 데이터베이스에 검증과 관련된 정보를 히스토리 내역으로 복사하여 저장한다(S530). 이를 통해, 요청받은 모든 무결성 검증 작업의 현재 상태 및 완료 내역이 데이터베이스의 히스토리 테이블에 기록되도록 하고, 추후 이력 관리가 가능하도록 한다. The verification
도 6은 도 4의 무결성 검증 서버의 무결성 검증 코어에서의 인공지능 학습 과정을 개략적으로 나타낸 개념도이다.6 is a conceptual diagram schematically showing an artificial intelligence learning process in the integrity verification core of the integrity verification server of FIG. 4.
도 6을 참조하면, 비디오 인공지능 무결성 검증 코어 또는 이미지 인공지능 무결성 검증 코어는, 특정 콘텐츠의 워터마크 검출 및 무결성 검증에 의해 위변조가 확인된 경우, 위변조 이미지와 해당 콘텐츠의 원본 이미지를 대조하여 차이점 부분을 추출할 수 있다. 그리고는, 차이점 부분에 대해당하는 데이터를 취합하여 학습 데이터를 생성할 수 있다. 이때, 학습 데이터의 셋은 (차이점 정보, 원본 이미지)가 될 수 있다. 또는, (차이점 정보, 위변조 이미지) 또는 (차이점 정보, 원본 이미지, 위변조 이미지)의 세트가 될 수 있다. 이러한 학습 데이터를 다수 개 확보하여 다양한 케이스(case)의 위변조를 학습하고, 신뢰성 있는 무결성 검증 결과가 도출될 수 있도록 한다. 위의 예시는 이미지 콘텐츠에 대한 차이점 부분을 분석하는 내용을 기술하고 있는데, 이와 유사한 방식으로 비디오 콘텐츠에 대한 학습도 이루어질 수 있음은 본 발명의 속하는 기술분야의 통상의 기술자에게는 자명한 것일 것이다. 이러한 학습을 통해, 위변조와 관련된 공격이 많이 진행되는 위치, 공격의 형태, 및 공격이 이루어진 콘텐츠의 속성, 상기 콘텐츠의 속성과 공격위치의 대응관계, 콘텐츠의 속성과 공격의 형태에 대한 대응관계 등에 관한 데이터를 축적할 수 있다. 상기와 같은 학습에 의한 대응관계를 기반으로, 특정 속성의 콘텐츠는 특정 공격 위치, 또는 특정 공격 형태에 보다 강도높은 무결성 검증이 이루어질 수 있도록 후속 조치를 취할 수 있다. Referring to FIG. 6, when the video AI integrity verification core or the image AI integrity verification core is verified by forgery by watermark detection and integrity verification of a specific content, a difference is made by comparing the forgery image with the original image of the corresponding content The part can be extracted. Then, the data corresponding to the difference portion can be collected to generate learning data. At this time, the set of learning data may be (difference information, original image). Alternatively, it may be a set of (difference information, forged image) or (difference information, original image, forged image). By securing a large number of such learning data, it is possible to learn forgery and alteration of various cases and to obtain reliable integrity verification results. The above example describes content for analyzing the difference part of the image content, and it will be apparent to those skilled in the art that the video content can be learned in a similar manner. Through such learning, the location where a lot of attacks related to forgery and alteration proceeds, the form of the attack, and the property of the content where the attack was made, the relationship between the property of the content and the attack position, the relationship between the property of the content and the form of the attack, etc. Data can be accumulated. Based on the correspondence by learning as described above, the content of a specific attribute may take a follow-up action so that a stronger integrity verification can be performed on a specific attack location or a specific attack type.
본 발명의 실시예에 따르면, 비디오 콘텐츠와 이미지 콘텐츠는 각각 비디오 인공지능 무결성 검증 코어 또는 이미지 인공지능 무결성 검증 코어에서 별도로 학습된다. According to an embodiment of the present invention, the video content and the image content are separately trained in the video AI integrity verification core or the image AI integrity verification core, respectively.
이상에서 설명된 시스템 또는 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 시스템, 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The system or device described above may be implemented with hardware components, software components, and/or combinations of hardware components and software components. For example, the systems, devices, and components described in embodiments include, for example, processors, controllers, arithmetic logic units (ALUs), digital signal processors (micro signal processors), microcomputers, and field programmable arrays (FPAs). ), a programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions, may be implemented using one or more general purpose computers or special purpose computers. The processing device may run an operating system (OS) and one or more software applications running on the operating system. In addition, the processing device may access, store, manipulate, process, and generate data in response to the execution of the software. For convenience of understanding, a processing device may be described as one being used, but a person having ordinary skill in the art, the processing device may include a plurality of processing elements and/or a plurality of types of processing elements. It can be seen that may include. For example, the processing device may include a plurality of processors or a processor and a controller. In addition, other processing configurations, such as parallel processors, are possible.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may include a computer program, code, instruction, or a combination of one or more of these, and configure the processing device to operate as desired, or process independently or collectively You can command the device. Software and/or data may be interpreted by a processing device, or to provide instructions or data to a processing device, of any type of machine, component, physical device, virtual equipment, computer storage medium or device. , Or may be permanently or temporarily embodied in the transmitted signal wave. The software may be distributed over networked computer systems and stored or executed in a distributed manner. Software and data may be stored in one or more computer-readable recording media.
실시예들에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to the embodiments may be implemented in the form of program instructions that can be executed through various computer means and recorded on a computer readable medium. The computer-readable medium may include program instructions, data files, data structures, or the like alone or in combination. The program instructions recorded in the medium may be specially designed and configured for the embodiments or may be known and usable by those skilled in computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tapes, optical media such as CD-ROMs, DVDs, and magnetic media such as floptical disks. Includes hardware devices specifically configured to store and execute program instructions such as magneto-optical media, and ROM, RAM, flash memory, and the like. Examples of program instructions include high-level language code that can be executed by a computer using an interpreter, etc., as well as machine language codes produced by a compiler. The hardware device described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.As described above, although the embodiments have been described by a limited embodiment and drawings, those skilled in the art can make various modifications and variations from the above description. For example, the described techniques are performed in a different order than the described method, and/or the components of the described system, structure, device, circuit, etc. are combined or combined in a different form from the described method, or other components Alternatively, even if replaced or substituted by equivalents, appropriate results can be achieved.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.
Claims (19)
상기 인터페이스 서버로부터의 요청에 대응하여 상기 대상 콘텐츠에 워터마크가 정상 검출되는지 여부를 판단하여 검출결과를 상기 인터페이스 서버로 반환하는 워터마크 검출 서버; 및
상기 인터페이스 서버로부터의 무결성 검증 요청에 대응하여 상기 대상 콘텐츠의 무결성을 검증하고 검증결과를 상기 인터페이스 서버로 반환하는 무결성 검증 서버를 포함하되,
상기 인터페이스 서버는, 상기 워터마크 검출 서버로부터의 워터마크에 대한 검출결과가 워터마크가 삽입되어 있지 않음을 지시함에 대응하여 상기 무결성 검증 서버로 상기 무결성 검증 요청을 제공하는, 무결성 검증 시스템.An interface server that receives an integrity verification request for target content from a user terminal, provides a watermark detection request for the target content to a watermark detection server, and provides an integrity verification request to an integrity verification server based on the watermark detection result;
A watermark detection server that determines whether a watermark is normally detected in the target content in response to a request from the interface server and returns a detection result to the interface server; And
And an integrity verification server that verifies the integrity of the target content and returns a verification result to the interface server in response to an integrity verification request from the interface server.
And the interface server provides the integrity verification request to the integrity verification server in response to the detection result for the watermark from the watermark detection server indicating that no watermark is inserted.
상기 워터마크 검출 서버는 상기 대상 콘텐츠에 연성 워터마크(fragile watermark)가 존재하는지 여부를 검출하여 판단결과를 상기 인터페이스 서버에 제공하고,
상기 인터페이스 서버는 연성 워터마크가 정상적으로 검출됨에 대응하여, 상기 무결성 검증 서버로의 무결성 검증 요청 없이, 직접적으로 무결성 검증 결과를 상기 사용자 단말로 제공하는, 무결성 검증 시스템.According to claim 1,
The watermark detection server detects whether a soft watermark exists in the target content and provides a determination result to the interface server,
The interface server provides an integrity verification result directly to the user terminal without a request for integrity verification to the integrity verification server, in response to a soft watermark being normally detected.
상기 무결성 검증 서버는 비디오 인공지능 무결성 검증 코어 및 이미지 인공지능 무결성 검증 코어 중 적어도 하나를 이용하여 상기 대상 콘텐츠에 대한 무결성을 검증하는, 무결성 검증 시스템.According to claim 2,
The integrity verification server, the integrity verification system for verifying the integrity of the target content using at least one of the video AI integrity verification core and the image AI integrity verification core.
복수의 무결성 검증 요청들을 상기 무결성 검증 서버와 연관된 저장소에 존재하는 스케쥴링 큐(scheduling queue)에 저장하고 스케쥴링 큐에 저장된 순서대로 상기 복수의 무결성 검증 요청들을 처리하는, 무결성 검증 시스템.According to claim 3, The integrity verification server,
An integrity verification system that stores a plurality of integrity verification requests in a scheduling queue existing in a storage associated with the integrity verification server and processes the plurality of integrity verification requests in the order stored in the scheduling queue.
상기 스케쥴링 큐에 저장된 작업을 순서대로 처리하기 위해 복수의 쓰레드(thread)를 이용하여 병렬적으로 처리하는, 무결성 검증 시스템.According to claim 4, The integrity verification server,
An integrity verification system for processing in parallel using a plurality of threads to sequentially process jobs stored in the scheduling queue.
상기 인터페이스 서버로부터 무결성 검증 요청을 수신하여 저장소에 저장하고 상기 대상 콘텐츠를 다운로드 대기 상태로 변경하는 요청 수신 모듈;
상기 저장소에 콘텐츠 다운로드 대기 작업이 있는지 판단하여 판단 결과에 따라 상기 대상 콘텐츠를 다운로드하고 무결성 판단 대기 상태로 변경하는, 콘텐츠 관리 모듈;
상기 저장소에 무결성 판단 대기 작업이 있는지 판단하여 상기 비디오 인공지능 무결성 검증 코어 및 상기 이미지 인공지능 무결성 검증 코어 중 적어도 하나를 이용하여 상기 대상 콘텐츠의 무결성을 검증하는, 무결성 판단 모듈; 및
상기 무결성 판단 모듈에서의 무결성 검증 결과를 상기 인터페이스 서버로 제공하는 검증 결과 전송 모듈을 포함하는, 무결성 검증 시스템.According to claim 3, The integrity verification server,
A request receiving module that receives an integrity verification request from the interface server, stores it in a storage, and changes the target content to a download standby state;
A content management module that determines whether there is a job waiting to download content in the storage and downloads the target content according to the determination result and changes it to a waiting state for integrity determination;
An integrity determination module for determining whether there is an operation to wait for integrity determination in the storage and verifying the integrity of the target content using at least one of the video artificial intelligence integrity verification core and the image artificial intelligence integrity verification core; And
And a verification result transmission module that provides an integrity verification result in the integrity determination module to the interface server.
상기 비디오 인공지능 무결성 검증 코어와 상기 이미지 인공지능 무결성 검증 코어는, 상기 대상 콘텐츠의 위변조가 발생되어 상기 대상 콘텐츠의 원본 부분과의 차이가 나는 부분을 추출하여 학습하되,
상기 비디오 인공지능 무결성 검증 코어와 상기 이미지 인공지능 무결성 검증 코어는 독립적으로 학습이 이루어지는, 무결성 검증 시스템.The method of claim 6,
The video artificial intelligence integrity verification core and the image artificial intelligence integrity verification core extract and learn a part in which forgery of the target content occurs and a difference from the original part of the target content occurs,
The video AI integrity verification core and the image AI integrity verification core are independently learned, integrity verification system.
상기 비디오 인공지능 무결성 검증 코어와 상기 이미지 인공지능 무결성 검증 코어는, 상기 차이가 나는 부분을 추출하여 학습된 데이터를 기반으로, 위변조와 관련된 공격이 진행되는 위치, 상기 공격의 형태, 및 상기 공격이 이루어진 콘텐츠의 속성, 상기 공격이 이루어진 콘텐츠의 속성과 공격 위치의 대응관계, 및 상기 공격이 이루어진 콘텐츠의 속성과 공격의 형태에 대한 대응관계를 학습하는, 무결성 검증 시스템.The method of claim 7,
The video AI integrity verification core and the image AI integrity verification core, based on the learned data by extracting the difference, the location where the forgery-related attack proceeds, the type of attack, and the attack An integrity verification system that learns the properties of the content made, the correspondence between the property of the attacked content and the attack location, and the property of the attacked content and the correspondence to the form of the attack.
상기 요청 수신 모듈, 상기 콘텐츠 관리 모듈, 상기 무결성 판단 모듈 및 상기 검증 결과 전송 모듈은 작업 쓰레드의 갯수, 상기 인터페이스 서버와의 연결 설정 값을 가지며,
상기 작업 쓰레드의 갯수 및 상기 연결 설정 값은 상기 무결성 검증 서버의 상태에 따라 실시간으로 변경되는, 무결성 검증 시스템.The method of claim 6,
The request receiving module, the content management module, the integrity determination module and the verification result transmission module have a number of work threads and a connection setting value with the interface server,
The number of work threads and the connection setting value are changed in real time according to the state of the integrity verification server, the integrity verification system.
상기 무결성 검증 서버는 상기 인터페이스 서버로부터 요청 받은 모든 무결성 검증 요청과 연관된 작업의 현재 상태 및 완료 내역을 상기 저장소에 테이블 형태로 기록하는, 무결성 검증 시스템.The method of claim 6,
The integrity verification server records the current status and completion details of the work associated with all the integrity verification requests requested from the interface server in the form of a table in the repository.
상기 인터페이스 서버가, 상기 수신된 무결성 검증 요청에 대응하여 워터마크 검출 서버로 상기 대상 콘텐츠에 대한 워터마크 검출요청을 제공하는 단계;
상기 워터마크 검출 서버가, 상기 인터페이스 서버로부터의 요청에 대응하여 상기 대상 콘텐츠에 워터마크가 정상 검출되는지 여부를 판단하여 워터마크 검출결과를 상기 인터페이스 서버로 반환하는 단계;
상기 인터페이스 서버가, 상기 반환된 검출결과를 기반으로 무결성 검증 서버로 무결성 검증 요청을 제공하는 단계;
상기 무결성 검증 서버가, 상기 인터페이스 서버로부터의 무결성 검증 요청에 대응하여 상기 대상 콘텐츠의 무결성을 검증하고 검증결과를 상기 인터페이스 서버로 반환하는 단계를 포함하되,
상기 인터페이스 서버는, 상기 워터마크 검출 서버로부터의 워터마크에 대한 검출결과가 워터마크가 삽입되어 있지 않음을 지시함에 대응하여 상기 무결성 검증 서버로 상기 무결성 검증 요청을 제공하는, 무결성 검증 시스템의 무결성 검증 방법.Receiving, by the interface server, an integrity verification request for the target content from the user terminal;
Providing, by the interface server, a watermark detection request for the target content to a watermark detection server in response to the received integrity verification request;
The watermark detection server determining whether a watermark is normally detected in the target content in response to a request from the interface server, and returning the watermark detection result to the interface server;
Providing, by the interface server, an integrity verification request to an integrity verification server based on the returned detection result;
The integrity verification server, in response to the integrity verification request from the interface server, including the step of verifying the integrity of the target content and returning the verification result to the interface server,
The interface server provides the integrity verification request to the integrity verification server in response to the detection result for the watermark from the watermark detection server indicating that no watermark is inserted, integrity verification of the integrity verification system Way.
상기 저장소에 콘텐츠 다운로드 대기 작업이 있는지 판단하고, 상기 판단결과에 따라 상기 대상 콘텐츠를 다운로드하고 무결성 판단 대기 상태로 변경하는 콘텐츠 관리 모듈;
상기 저장소에 무결성 판단 대기 작업이 있는지 판단하여 상기 비디오 인공지능 무결성 검증 코어 및 상기 이미지 인공지능 무결성 검증 코어 중 적어도 하나를 이용하여 상기 대상 콘텐츠의 무결성을 검증하는, 무결성 판단 모듈; 및
상기 무결성 판단 모듈에서의 무결성 검증 결과를 상기 클라우드 서버로 제공하는 검증 결과 전송 모듈을 포함하는, 무결성 검증 장치.A request receiving module for receiving an integrity verification request from a cloud server and storing it in a storage, and changing target content subject to integrity verification to a download standby state;
A content management module that determines whether there is a job waiting to download content in the storage, and downloads the target content according to the determination result and changes the status to a waiting state for integrity determination;
An integrity determination module for determining whether there is a job waiting for integrity determination in the storage and verifying the integrity of the target content using at least one of the video AI integrity verification core and the image AI integrity verification core; And
And a verification result transmission module that provides an integrity verification result from the integrity determination module to the cloud server.
상기 비디오 인공지능 무결성 검증 코어와 상기 이미지 인공지능 무결성 검증 코어는, 상기 대상 콘텐츠의 위변조가 발생되어 상기 대상 콘텐츠의 원본 부분과의 차이가 나는 부분을 추출하여 학습하되,
상기 비디오 인공지능 무결성 검증 코어와 상기 이미지 인공지능 무결성 검증 코어는 독립적으로 학습이 이루어지는, 무결성 검증 장치.The method of claim 12,
The video artificial intelligence integrity verification core and the image artificial intelligence integrity verification core extract and learn a part in which forgery of the target content occurs and a difference from the original part of the target content occurs,
The video AI integrity verification core and the image AI integrity verification core, independent learning is done, integrity verification device.
상기 비디오 인공지능 무결성 검증 코어와 상기 이미지 인공지능 무결성 검증 코어는, 상기 차이가 나는 부분을 추출하여 학습된 데이터를 기반으로, 위변조와 관련된 공격이 진행되는 위치, 상기 공격의 형태, 및 상기 공격이 이루어진 콘텐츠의 속성, 상기 공격이 이루어진 콘텐츠의 속성과 공격 위치의 대응관계, 및 상기 공격이 이루어진 콘텐츠의 속성과 공격의 형태에 대한 대응관계를 학습하는, 무결성 검증 장치.The method of claim 13,
The video AI integrity verification core and the image AI integrity verification core, based on the learned data by extracting the difference, the location where the forgery-related attack proceeds, the type of attack, and the attack An integrity verification device that learns the properties of the content made, the correspondence between the property of the attacked content and the attack location, and the property of the attacked content and the correspondence to the attack type.
상기 요청 수신 모듈, 상기 콘텐츠 관리 모듈, 상기 무결성 판단 모듈 및 상기 검증 결과 전송 모듈은 작업 쓰레드의 갯수, 상기 클라우드 서버와의 연결 설정 값을 가지며,
상기 작업 쓰레드의 갯수 및 상기 연결 설정 값은 상기 무결성 검증 서버의 상태에 따라 실시간으로 변경되는, 무결성 검증 장치.The method of claim 12,
The request receiving module, the content management module, the integrity determination module and the verification result transmission module have a number of work threads and a connection setting value with the cloud server,
The number of work threads and the connection setting value are changed in real time according to the state of the integrity verification server, the integrity verification device.
상기 무결성 검증 서버는 상기 클라우드 서버로부터 요청 받은 모든 무결성 검증 요청과 연관된 작업의 현재 상태 및 완료 내역을 상기 저장소에 테이블 형태로 기록하는, 무결성 검증 장치.The method of claim 12,
The integrity verification server records the current status and completion history of the work associated with all the integrity verification requests requested from the cloud server in the form of a table in the storage.
복수의 무결성 검증 요청들을 상기 저장소에 존재하는 스케쥴링 큐(scheduling queue)에 저장하고 스케쥴링 큐에 저장된 순서대로 상기 복수의 무결성 검증 요청들을 처리하는, 무결성 검증 장치.The method of claim 12,
An integrity verification apparatus, storing a plurality of integrity verification requests in a scheduling queue existing in the storage and processing the plurality of integrity verification requests in the order stored in the scheduling queue.
상기 스케쥴링 큐에 저장된 작업을 순서대로 처리하기 위해 복수의 쓰레드(thread)를 이용하여 병렬적으로 처리하는, 무결성 검증 장치.The method of claim 17,
An apparatus for verifying integrity, which performs parallel processing using a plurality of threads to sequentially process jobs stored in the scheduling queue.
상기 저장된 무결성 검증 요청과 연관된 대상 콘텐츠를 다운로드 대기상태로 변경하는 단계;
상기 저장소에 콘텐츠 다운로드 대기 작업이 있는지 판단하여 상기 대상 콘텐츠를 다운로드하고 무결성 판단 대기 상태로 변경하는 단계;
상기 저장소에 무결성 판단 대기 작업이 있는지 판단하여 상기 비디오 인공지능 무결성 검증 코어 및 상기 이미지 인공지능 무결성 검증 코어 중 적어도 하나를 이용함에 의해 상기 대상 콘텐츠의 무결성을 검증하는 단계; 및
무결성 검증 결과를 클라우드 서버로 제공하는 단계를 포함하는, 무결성 검증 장치의 무결성 검증 방법.
Receiving an integrity verification request from a cloud server and storing it in a storage;
Changing the target content associated with the stored integrity verification request to a download standby state;
Determining whether there is a job to wait for content download in the storage and downloading the target content and changing to an integrity determination waiting state;
Verifying the integrity of the target content by using at least one of the video artificial intelligence integrity verification core and the image artificial intelligence integrity verification core by determining whether there is an operation for waiting for integrity determination in the storage; And
Comprising the step of providing an integrity verification result to the cloud server, the integrity verification method of the integrity verification device.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180145915 | 2018-11-23 | ||
| KR20180145915 | 2018-11-23 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20200061276A true KR20200061276A (en) | 2020-06-02 |
| KR102628293B1 KR102628293B1 (en) | 2024-01-24 |
Family
ID=71090949
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020190007377A KR102628293B1 (en) | 2018-11-23 | 2019-01-21 | Integrity verification system, method and apparatus using artifitial intelligence based on cloud |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102628293B1 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102654686B1 (en) | 2023-11-14 | 2024-04-04 | 정강배 | Device for spinal massage with multiple rollers |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101880686B1 (en) * | 2018-02-28 | 2018-07-20 | 에스지에이솔루션즈 주식회사 | A malware code detecting system based on AI(Artificial Intelligence) deep learning |
-
2019
- 2019-01-21 KR KR1020190007377A patent/KR102628293B1/en active IP Right Grant
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101880686B1 (en) * | 2018-02-28 | 2018-07-20 | 에스지에이솔루션즈 주식회사 | A malware code detecting system based on AI(Artificial Intelligence) deep learning |
Non-Patent Citations (2)
| Title |
|---|
| Asifullah Khan et al., "Machine learning based adaptive watermark decoding in view of anticipated attack", Pattern Recognition, Volume 41, Issue 8, pp. 2594-2610(2008.08.)* * |
| Qian Wang et al., "Enabling Public Auditability and Data Dynamics for Storage Security in Cloud Computing", IEEE Transactions on Parallel and Distributed Systems, Vol. 22, No. 5, pp. 847-859(2011.05.)* * |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102654686B1 (en) | 2023-11-14 | 2024-04-04 | 정강배 | Device for spinal massage with multiple rollers |
Also Published As
| Publication number | Publication date |
|---|---|
| KR102628293B1 (en) | 2024-01-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10699195B2 (en) | Training of artificial neural networks using safe mutations based on output gradients | |
| US10621487B2 (en) | Neural network verification | |
| CN101986292B (en) | Method and system for processing forms based on an image | |
| US11956264B2 (en) | Method and system for verifying validity of detection result | |
| CN109344611B (en) | Application access control method, terminal equipment and medium | |
| WO2015068210A1 (en) | Trace-data recording system, trace-data recording server, trace-data recording method, program, and information storage medium | |
| WO2020256732A1 (en) | Domain adaptation and fusion using task-irrelevant paired data in sequential form | |
| US20220270355A1 (en) | Distributed learning method, server and application using identification card recognition model, and identification card recognition method using the same | |
| Shavit | What does it take to catch a Chinchilla? Verifying rules on large-scale neural network training via compute monitoring | |
| GB2511329A (en) | Web service black box testing | |
| CN114219971A (en) | Data processing method, data processing equipment and computer readable storage medium | |
| KR102628293B1 (en) | Integrity verification system, method and apparatus using artifitial intelligence based on cloud | |
| CN112347457A (en) | Abnormal account detection method and device, computer equipment and storage medium | |
| CN116420135A (en) | Continuous integration and development of code in a secure environment | |
| KR102151756B1 (en) | Apparatus and method of managing and arranging workers | |
| CN111368128A (en) | Target picture identification method and device and computer readable storage medium | |
| JP2012182737A (en) | Secret data leakage preventing system, determining apparatus, secret data leakage preventing method and program | |
| CN109446054B (en) | Processing method and terminal equipment for override operation request based on big data | |
| JP6930862B2 (en) | Client tampering judgment system and method | |
| EP3937461A1 (en) | Data service tracker module for a communication system and method of determining a set of data couplings | |
| US20220353273A1 (en) | Machine learning techniques for object authentication | |
| US9979735B2 (en) | Devices, methods and systems for secure data transfers | |
| KR102285755B1 (en) | Integrity verification system, method and apparatus for geographic information content using artifitial intelligence | |
| KR20230073056A (en) | Malicious event log automatic analysis device and method | |
| WO2014054233A1 (en) | Performance evaluation device, method and program for information system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right |