WO2017111340A1 - System and method for identifying illegally copied online comics - Google Patents

System and method for identifying illegally copied online comics Download PDF

Info

Publication number
WO2017111340A1
WO2017111340A1 PCT/KR2016/014063 KR2016014063W WO2017111340A1 WO 2017111340 A1 WO2017111340 A1 WO 2017111340A1 KR 2016014063 W KR2016014063 W KR 2016014063W WO 2017111340 A1 WO2017111340 A1 WO 2017111340A1
Authority
WO
WIPO (PCT)
Prior art keywords
content
image
normalized
feature point
information
Prior art date
Application number
PCT/KR2016/014063
Other languages
French (fr)
Korean (ko)
Inventor
강호갑
김태현
Original Assignee
주식회사 디알엠인사이드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 디알엠인사이드 filed Critical 주식회사 디알엠인사이드
Publication of WO2017111340A1 publication Critical patent/WO2017111340A1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries

Definitions

  • the present invention relates to a system and method for recognizing illegally copied online comics, and more particularly, to compare illegal copies of a duplicate file generated by copying online comics provided online, such as webtoons, with the original image of online comics.
  • An illegally copied online cartoon identification system and method for preventing illegal distribution of online cartoons by providing online cartoons for identification can be provided.
  • the content posting and sharing function through the network is activated through the network, and copyright holders who produce and distribute the content are uploading and distributing their contents through various portal sites. Accordingly, the user can easily acquire various content works online.
  • online cartoon-related contents such as web toon are one of the most popular contents, and as a result, most pirated contents are fluttered, and thus, to prevent illegal contents related to such online cartoons, Techniques for identifying and preventing pirated contents by applying various technologies are emerging.
  • the present invention can not only extract feature points easily, but also extract illegal points from online comic content by dividing the online comic content consisting of a single image of each unit or by combining images of different episodes, as well as feature points, calculation amounts, and processing from the online comic content.
  • the goal is to help identify the counterfeit content accurately and to block the distribution of the counterfeit content by supporting the comparison with each other while greatly reducing the time.
  • the present invention can easily distinguish the episode corresponding to the illegal copy content based on the feature point extracted from the online comic content, and thus, the feature point from the illegal copy content of the next round after the corresponding episode.
  • the purpose is to support accurate identification of illegally copied contents by extracting and supporting accurate and continuous comparison of contents in each series.
  • an illegally copied online comic book identification system corresponds to each of the different online comic book contents and stores the reference reference feature points for the feature points of the original video images, which are matched with the content information of the online comic book content.
  • a storage unit an image extraction unit which receives identification target content, extracts one or more identification target images constituting the identification target content, and identifies a sequence of identification target images according to file names specified in the identification target images,
  • a normalized image normalized to one image to be identified with an image having the normalized size through at least one of resizing, combining, and dividing a plurality of identification target images based on the sequence or a plurality of identification target images based on the order according to a preset normalization size Normalization unit for generating and the normalization Extracts feature points from an image to generate normalized feature point information, extracts content information matched with reference feature point information that matches the reference feature point information stored in the storage unit, and extracts the identification target content corresponding to the content information. It may include a
  • the storage unit may store turn information matched with reference feature point information for each turn, and the determination unit may include turn information matched with reference feature point information that matches the normalized feature point information with the content information. It may be characterized by providing.
  • the determination unit generates a plurality of normalized images in association with the image extracting unit and the normalizing unit, and then stores the normalized feature point information corresponding to each normalized image and stored in the storage unit.
  • the identification target content is determined as illegal copy content for the specific online cartoon content. And providing content information on the specific online cartoon content.
  • the determination unit generates the total feature point information by combining the plurality of reference feature point information matching the same content information according to a turn order according to the turn information and then combining adjacent reference feature point information with each other,
  • the normalized feature point information may be scanned in a sliding manner with respect to the entire feature point information to identify reference feature point information corresponding to the normalized feature point information.
  • the normalization unit may adjust the size of the identification target image based on a horizontal reference of a preset size according to the normalization size.
  • the normalization unit may adjust the size of the identification target image based on a horizontal reference of a preset ratio according to the normalization size.
  • the normalization unit divides an area exceeding the normalization size by the division; It may be characterized by generating a normalized image corresponding to the normalized size.
  • the determination unit compares a creation date of the identification target content with a creation date included in the content information, and compares reference feature point information matched with content information generated after the creation date of the identification target content. It may be characterized by excluding from the comparison.
  • the illegally copied online comic book identification method of the apparatus for identifying illegally copied content copying the online comic book content includes extracting feature points of the original image for each episode constituting the online comic book content. Generating an image, matching the turn information and the content information corresponding to the reference feature point information, and storing the same in a DB; receiving identification content; and extracting at least one identification image constituting the identification content. And identify the order of the identification target image according to the file name assigned to each identification target image, and size the target image or a plurality of consecutive identification target images based on the identification target image according to a preset normalized size.
  • the regular through at least one of adjusting, combining, and dividing Generating a normalized image normalized to an image having a size and extracting a feature point from the normalized image to generate normalized feature point information, and comparing content information matched with reference feature point information matched with reference feature point information stored in the DB. And extracting the content to be identified as illegal copy content corresponding to the content information.
  • the determining may include providing the turn information stored in the DB along with the reference feature point information that matches the normalized feature point information together with the content information.
  • the present invention extracts feature points by normalizing a sequence of images constituting illegally copied content illegally copying online cartoon content to a preset size comparable to the original image constituting the online cartoon content, and sequentially extracts the feature points from the original image.
  • the original image can be easily identified by identifying the original image that matches the duplicated image, and also provides information on the turnover of online cartoon content corresponding to the duplicated image.
  • the accuracy of identification of illegally copied contents can be increased, and at the same time, the distribution of illegally copied contents can be blocked.
  • the present invention generates a plurality of normalized images by normalizing a plurality of images constituting the illegally copied content, and sequentially scans the feature points extracted from each normalized image with respect to the feature points of each original image constituting the online cartoon content. It is possible to easily and accurately identify the turn of online cartoon content that matches each normalized image, and through this, even when using a small number of normalized images generated by using a small number of images constituting the pirated content, the illegal content is compared through feature point comparison. It is not only able to accurately identify the online cartoon content and the corresponding turn, but also eliminates the need to extract the feature points for all the images belonging to the pirated content as in the past. Reliability for It is effective for improving the efficiency.
  • FIG. 1 is a block diagram of an illegally copied online cartoon identification system according to an embodiment of the present invention.
  • FIG. 2 is an exemplary diagram illustrating a DB construction process for online cartoon content of an illegally copied online cartoon identification system according to an embodiment of the present invention.
  • Figure 3 is an illustration of a normalization process of the illegal online copy identification system according to an embodiment of the present invention.
  • FIG. 4 is an exemplary diagram for a process of detecting illegally copied contents of an illegally copied online cartoon identification system according to an embodiment of the present invention.
  • 5 to 7 are exemplary views showing various embodiments of feature point comparison of an illegally copied online comic book identification system according to an embodiment of the present invention.
  • FIG. 8 is a flowchart illustrating a method for identifying an illegally copied online comic book according to an embodiment of the present invention.
  • an unauthorized person who illegally copies the online cartoon content may capture a single image of each round and divide the image into various sizes to generate a plurality of image files, and bundle the plurality of image files into a single file to generate illegal content. Take the form of unauthorized distribution.
  • the duplicated image contains a plurality of single images constituting the original cartoon. It is composed of a divided image or a combination of images belonging to multiple rounds, so it is impossible to identify which round the duplicated image belongs to. Therefore, one-to-one matching is not possible by extracting feature points between the original image and the duplicated image. It is difficult to apply a detection method used for identification of scan comics to detect content that illegally copies online comic content.
  • the present invention proposes a method for easily and accurately identifying illegally copied contents that are illegally copied online cartoon contents.
  • FIG. 1 is a block diagram of an illegally copied online comic book identification system according to an embodiment of the present invention, and may include an image extraction unit 110, a normalization unit 120, and a determination unit 130 as shown.
  • the image extractor 110 may extract the original image of each episode constituting the copyrighted online comic content and provide the same to the determiner 130.
  • the creation date or publication date may be different from each other in the original images of different rounds.
  • the image extraction unit 110 may receive the content information on the online cartoon content and the turn information of the turn of each original image from the outside to provide to the determination unit 130.
  • the determination unit 130 extracts the feature points from the original image for each turn, generates reference feature point information for the original image of each turn, and matches and stores the content information for the online cartoon content in the content DB 140. Can be.
  • the determination unit 130 may match the turn information of the original image corresponding to the reference feature point information of each turn with the reference feature point information and store it in the content DB 140.
  • the illegally copied online comic book identification system may extract feature points for each time corresponding to different copyrighted online comic book contents, and store and manage information on the content DB 140 in the content DB 140.
  • the illegally copied online comic book identification system identifies illegally copied content generated by illegally copying online comic book content collected from the outside based on the feature point information of the online comic book content stored in the content DB 140, and corresponding illegal It can help block the distribution of duplicated content in advance.
  • the image extraction unit 110 receives the identification target content that is the identification target of whether the content is illegal copying content, extracts a part of the plurality of identification target images constituting the identification target content to the normalization unit 120 Can provide.
  • the normalization unit 120 may have a preset size to be comparable with the reference feature point information through at least one of scaling, combining, and dividing based on one or more identification target images provided from the image extraction unit 110.
  • a normalized normalized image may be generated and provided to the determination unit 130.
  • the determination unit 130 may extract feature points from the normalized image, generate normalized feature point information thereof, and compare the feature points with the feature point information stored in the DB 140.
  • the determination unit 130 may extract and provide content information matched with the feature point information, whereby the identification target content corresponds to the content information.
  • the online comic content can be determined to be illegal copy content that is illegally copied.
  • the illegally copied online cartoon identification system may be configured in a device such as a server or as a separate device to interwork or connect with another device such as the server to perform the operation described in the present invention.
  • the illegally copied online cartoon identification system collects illegal content, content information, and turnaround information related to online cartoons from various web portal servers or various content sharing servers such as OSPs (Online Service Providers) where various contents are displayed.
  • OSPs Online Service Providers
  • the image extracting unit 110, the normalization unit 120, and the determination unit 130 may identify and detect whether the content is illegal copy content with respect to the identification target content collected from the collection unit. can do.
  • FIG. 3 is a diagram illustrating a normalization process of an illegally copied online comic book identification system.
  • the image extracting unit 110 receives an identification target content from an external source, and continues from the identification target content. After selecting the above-described identification target image can be extracted.
  • the identification target content may be composed of a plurality of identification target images
  • each identification target image may be composed of an image file having an extension such as JPEG, GIF, BMP, PNG, ICO.
  • the image extraction unit 110 may extract the identification target image by decompressing itself.
  • the normalization unit 120 may extract one or more identification target images in the order assigned to each identification target image in cooperation with the image extraction unit 110, and the order of the identification target images may be assigned to the identification target image.
  • the determination may be made based on the file name, but various order determination methods may be applied without being limited thereto.
  • the normalization unit 120 is one identification object received from the image extraction unit 110 to facilitate the comparison between the feature point extracted from the original image corresponding to the online cartoon content and the feature image extracted from the identification target image.
  • a normalized image having the normalized size may be generated by at least one of scaling, combining, and dividing the image or a plurality of images to be identified in sequence according to a preset normalized size.
  • the normalization unit 120 may adjust the size of the identification target image based on at least one of the ratio and the size, and the ratio and the size may be adjusted based on the horizontal basis.
  • the normalization unit 120 normalizes the size of the first identification target image (01.jpg) received from the image extraction unit 110 in correspondence with a preset normalization size (for example, 720 ⁇ 20,000 pixels). You can adjust the size relative to the horizontal.
  • a preset normalization size for example, 720 ⁇ 20,000 pixels. You can adjust the size relative to the horizontal.
  • the normalization unit 120 interoperates with the image extraction unit 110. 1 Extract and receive a second identification image (02.jpg) corresponding to the next sequence of the identification image (01.jpg), and adjust the size of the second identification image (02.jpg) according to the normalized size. It may be adjusted to combine with the first identification target image (01.jpg).
  • the normalization unit 120 normalizes when the size of the combined image according to the combination of the first identification image (01.jpg) and the second identification image (02.jpg) exceeds the normalization size.
  • a partial region of the second identification target image (02.jpg) exceeding the size may be divided to generate a normalized image corresponding to the normalized size.
  • the normalization unit 120 combines the partial image divided from the second identification target image (02.jpg) with the identification target image corresponding to the next sequence of the second identification target image (02.jpg), and then the other. You can create a normalized image.
  • the normalization unit 120 may provide the normalized image to the determination unit 130, and the determination unit 130 extracts a feature point from the normalization image and stores the reference feature point information stored in the content DB 140. In comparison, it is possible to determine whether the identification target content corresponding to the normalized image is illegal copy content according to the match, and an operation configuration thereof will be described in detail with reference to FIG. 4.
  • the determination unit 130 extracts a feature point from the normalized image provided from the normalization unit 120 to generate normalized feature point information, and generates the normalized feature point information using the content DB 140. ) Can be compared with reference feature point information corresponding to each of the online comic content.
  • the determination unit 130 may extract and provide content information matched with the matched reference feature point information. Through this, it may be determined that the identification target content is illegal copy content that illegally copies the online cartoon content corresponding to the extracted content information.
  • the determination unit 130 may extract turn information matched with reference feature point information that matches the normalized feature point information from the content DB 140 and provide the content with the content information, thereby providing the online cartoon content. It is provided to check the round corresponding to the normalized image among the rounds to be configured.
  • the determination unit 130 may generate a plurality of normalized images that are different from each other through at least one of scaling, combining, and dividing one or more consecutive identification target images. As described above, it is possible to determine whether there is matched reference feature point information based on the normalized feature point information extracted from the image, by comparing with the reference feature point information stored in the content DB 140.
  • the determination unit 130 determines that the identification target content is illegal copy content, thereby increasing the identification accuracy of the illegal copy content. Can be.
  • the normalized feature point information 2 extracted by combining the third identification image (03.jpg) and the fourth identification image (04.jpg) is the reference feature point information of the first round and the reference feature point information of the second round. Since they exist in both, the criteria corresponding to normalized feature point information 2, even though the feature points corresponding to normalized feature point information 2 exist in online comic content because they do not coincide with any one of the reference feature point information of the first round and the reference feature point information of the second round. It is determined that the feature point information does not exist, and thus the pirated content may not be identified.
  • the determination unit 130 may operate in conjunction with the image extraction unit 110 and the normalization unit 120 to form a plurality of normalization images based on a plurality of identification target images constituting identification target content. Generates an image, generates a plurality of normalized feature point information corresponding to each normalized image extraction according to normalized feature points, and compares the normalized feature point information stored in the content DB 140 to correspond to any one of the on-line cartoon contents to normalize the normalized feature point information. When the number of feature point information and the reference feature point information coincide with each other is greater than or equal to a preset reference number, the operation may be determined to be illegal copy content for the online cartoon content.
  • the determination unit 130 determines that the pirated content is more than a predetermined number of feature points by comparing the feature points between the plurality of normalized images and the plurality of original images, thereby increasing the identification accuracy of the pirated content. At the same time, the error rate can be lowered.
  • the determination unit 130 arranges reference feature point information of each original image for each turn constituting the online comic book content in turn, and then combines adjacent reference feature point information with each other to form a total feature point. Information may be generated, and through this, the entire feature point information may be scanned in a sliding manner based on the normalized feature point information to identify a region that matches the normalized feature point information among the feature points.
  • the determination unit 130 may identify regions where different reference feature points are interconnected and match the normalized feature point information. A plurality of pieces of reference feature points corresponding to the identified regions may be identified.
  • the determination unit 130 extracts a plurality of turn information each matching the plurality of reference feature point information from the content DB 140 on the basis of the plurality of reference feature point information having an area that matches the normalized feature point information. If the normalized feature point information is present in all different cycles, it is possible to provide information about all the times corresponding to the normalized feature point information to determine which sequence the normalized image corresponds to. To be provided.
  • the determination unit 130 may identify the plurality of times corresponding to the normalized feature point information by comparing the normalized feature point information existing over a plurality of times with reference feature point information existing at different times, thereby identifying each target. While accurately providing information on the turn of online cartoon content associated with an image, the identification accuracy of illegally copied content can be greatly improved.
  • the determination unit 130 may receive content information on the online cartoon content from the image extraction unit 110, the creation date (or publication date) and the included in the content information and the By comparing the creation date (or posting date and time) of the content to be identified, reference feature point information on the on-line cartoon content corresponding to the content information having the creation date after the creation date and time of the identification content may be excluded from the feature point comparison object.
  • the determination unit 130 excludes irrelevant online cartoon content from the comparison target in the process of identifying whether the content is illegally copied by comparing the online cartoon content stored in the DB 140 with the feature point. Can improve speed.
  • FIG. 8 is a flowchart illustrating a method for identifying an illegally copied online comic book according to an embodiment of the present invention.
  • a server configured with the illegally copied online comic book identification system may be provided in a differential original image constituting the online comic book content.
  • the feature point information may be extracted to generate reference feature point information, and matched with the turn information and the content information corresponding to the reference feature point information may be stored in the content DB 140 (S1).
  • the server may receive identification target content from the outside (S2) and extract one or more identification target images constituting the identification target content (S3).
  • the server identifies the order of the identification target image according to the file name assigned to each identification target image, and selects one identification target image or a plurality of consecutive identification target images based on the preset normalization size.
  • a normalized image normalized to an image having the normalized size may be generated through at least one of scaling, combining, and dividing.
  • the server extracts the feature points from the normalized image to generate normalized feature point information (S5), compares the reference feature point information stored in the content DB 140 (S6), and matches the content information matched with the reference feature point information.
  • the identification target content can be determined as illegal copy content corresponding to the content information (S8).
  • the server identifies the entire identification of the content to be identified among the identification target images corresponding to the normalized feature point information. On the basis of the order of the target image, it may be determined whether the identification target image corresponding to the last order exists (S9).
  • the server may determine that the identification target content is not illegal copy content and provide information about the last sequence.
  • the identification target image does not exist (S9), one or more consecutive identification target images corresponding to the next sequence are selected based on the order corresponding to the identification image of the next order among the identification target images corresponding to the normalized feature point information.
  • the present invention normalizes a continuous image constituting the pirated content piracy of the online cartoon content to a preset size comparable to the original image constituting the online cartoon content, and extracts a feature point from the original image.
  • the extracted feature points sequentially, even if the original image is duplicated in various forms, the original image that matches the duplicated image can be easily identified to detect illegally copied contents, and the online cartoon content corresponding to the duplicated image is returned.
  • the present invention generates a plurality of normalized images by normalizing a plurality of images constituting the illegally copied content, and sequentially scans the feature points extracted from each normalized image with respect to the feature points of each original image constituting the online cartoon content. It is possible to easily and accurately identify the turn of online cartoon content that matches each normalized image, and through this, even when using a small number of normalized images generated by using a small number of images constituting the pirated content, the illegal content is compared through feature point comparison. Not only can it accurately identify online comic content corresponding to and its turn, but also need to extract feature points from all images belonging to the pirated content as in the past, thereby greatly reducing the amount of computation and processing time.
  • CMOS based logic circuitry CMOS based logic circuitry
  • firmware software
  • software or a combination thereof.
  • transistors logic gates, and electronic circuits in the form of various electrical structures.

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Medical Informatics (AREA)
  • Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

The present invention relates to a system and method for identifying illegally copied online comics and, more particularly, to a system and method for identifying illegally copied online comics, which is arranged to compare a copied file that was generated by copying online comics provided online, such as a web toon, with the original images of the online comics and to easily identify illegally copied online comics, thereby preventing the online comics from being illegally distributed.

Description

불법 복제된 온라인 만화 식별 시스템 및 방법Pirated Online Comics Identification System and Method
본 발명은 불법 복제된 온라인 만화 식별 시스템 및 방법에 관한 것으로서, 더욱 상세히는 웹툰과 같이 온라인을 통해 제공되는 온라인 만화를 복제하여 생성한 복제 파일을 온라인 만화의 원본 이미지와 비교하여 용이하게 불법 복제된 온라인 만화를 식별할 수 있도록 제공함으로써 온라인 만화의 불법 유통을 방지할 수 있도록 한 불법 복제된 온라인 만화 식별 시스템 및 방법에 관한 것이다.The present invention relates to a system and method for recognizing illegally copied online comics, and more particularly, to compare illegal copies of a duplicate file generated by copying online comics provided online, such as webtoons, with the original image of online comics. An illegally copied online cartoon identification system and method for preventing illegal distribution of online cartoons by providing online cartoons for identification can be provided.
현재 네트워크를 통한 온라인(online)을 매개로 하는 컨텐츠(contents) 게재 및 공유 기능이 활성화되어 있으며, 이를 통해 컨텐츠를 제작하여 유통하는 저작권자는 다양한 포탈 사이트를 통해 자신의 컨텐츠를 업로드하여 유통하고 있으며, 이에 따라 사용자는 다양한 컨텐츠 저작물을 온라인을 통해 용이하게 습득할 수 있다.Currently, the content posting and sharing function through the network is activated through the network, and copyright holders who produce and distribute the content are uploading and distributing their contents through various portal sites. Accordingly, the user can easily acquire various content works online.
그러나, 온라인을 통한 컨텐츠의 습득이 용이해짐에 따라 온라인을 통한 컨텐츠 복제가 더욱 용이해졌으며, 이로 인해 포탈 사이트를 통해 게재된 컨텐츠를 캡처하거나 스캔 툴을 이용하여 스캔함으로써 복제 컨텐츠를 생성하고 이를 불법으로 온라인을 통해 유통시키는 불법 사례의 빈도가 더욱 증가하고 있다.However, the easier it is to acquire content online, the more easily it is possible to replicate content online, which creates and illegally duplicates content by capturing the content posted through the portal site or using a scanning tool. As a result, the frequency of illegal cases distributed online is increasing.
이에 따라, 저작권자의 권리가 무분별하게 침해되고 있을 뿐 아니라 저작물에 대한 정당한 비용을 제공하고 컨텐츠를 구독하는 사용자 역시 피해를 입고 있다.Accordingly, not only the rights of copyright holders are violated indiscriminately, but also the users who provide the right costs for the works and subscribe to the contents are also suffering.
이러한 컨텐츠 중에서도 웹툰(web toon)과 같은 온라인 만화 관련 컨텐츠는 가장 인기가 많은 컨텐츠 중 하나이며, 이로 인해 가장 많은 불법 복제 컨텐츠가 난무하는 상황이어서, 현재 이러한 온라인 만화와 관련된 불법 복제 컨텐츠를 예방하기 위한 다양한 기술을 적용하여 불법 복제 컨텐츠를 식별하고 예방하기 위한 기술이 등장하고 있다.Among these contents, online cartoon-related contents such as web toon are one of the most popular contents, and as a result, most pirated contents are fluttered, and thus, to prevent illegal contents related to such online cartoons, Techniques for identifying and preventing pirated contents by applying various technologies are emerging.
일례로, 종이로 구성된 만화책을 스캔하여 이미지 파일 형태로 생성한 불법 스캔 만화를 식별하기 위하여 불법 스캔 만화에서 연속된 이미지의 특징점을 추출한 후 원본만화에서 추출된 특징점과 비교함으로써 일치 여부에 따라 불법 복제 여부를 식별하는 기술을 온라인 만화의 불법 복제 컨텐츠를 식별하기 위한 용도로 적용하는 방법이 있다.For example, to identify illegal scanned comics created by scanning comic books made of paper, and extracting the feature points of consecutive images from illegal scan comics, comparing them with the feature points extracted from the original comics, and illegal copying according to the match. There is a method of applying the technology for identifying whether or not to identify illegal content of online comics.
그러나, 페이지 및 이미지 사이즈 단위가 명확하고 다수의 페이지로 구성되어 연속된 페이지의 특징점 추출이 용이한 스캔 만화와 달리 회차 단위의 단일 이미지로 구성되는 온라인 만화 관련 컨텐츠를 복제한 불법 복제 컨텐츠는 회차 또는 페이지 구분없이 임의의 이미지 사이즈로 구성되어 있을 뿐 아니라 소수의 이미지로 구성되어 있어 상술한 불법 스캔 만화를 식별하기 위해 적용되는 특징점 추출 방식을 상기 온라인 만화 컨텐츠를 불법 복제한 컨텐츠에 적용하는데 어려움이 있다.However, unlike scan comics, which have a clear unit of page and image size and are composed of a plurality of pages, which make it easy to extract feature points of consecutive pages, illegally copied content that duplicates online comic-related contents composed of a single image of a unit of a series may be repeated or It is difficult to apply the feature extraction method applied to identify the illegally scanned cartoons to the illegally copied contents of the online cartoon content because it is composed of a few images as well as a random image size without page division. .
이를 개선하기 위해, 온라인 만화 컨텐츠를 복제한 불법 복제 컨텐츠를 구성하는 개별 이미지의 모든 특징점들을 추출하여 순서대로 비교하는 방안이 제안되고 있으나, 이러한 방안은 하나의 이미지 식별을 위해 수많은 특징점 데이터 추출이 요구되고 이로 인해 연산량이 대폭 증가할 뿐만 아니라 불법 복제 컨텐츠 하나를 식별하기 위해 상당한 처리 시간이 요구된다. 이와 같은 방안은 비효율적일 뿐만 아니라 성능 보장 역시 힘든 문제점이 있다.In order to improve this, a method of extracting and comparing all feature points of individual images constituting the illegally copied content that reproduces the online cartoon content has been proposed. However, this method requires extracting a large number of feature data to identify one image. This not only significantly increases the amount of computation, but also requires significant processing time to identify one pirated content. Such a method is not only inefficient but also has a difficult problem of ensuring performance.
따라서, 상술한 문제점을 개선하여 온라인을 통해 게재된 온라인 만화를 복제한 불법 복제 컨텐츠를 간단하게 식별하고, 이를 통해 불법 복제 컨텐츠의 유통을 사전에 차단할 수 있는 대안이 요구되고 있다.Accordingly, there is a need for an alternative that can easily identify illegal contents copied from online comics posted online through the above-described problem, and thereby prevent the illegal distribution of the illegal contents.
[선행기술문헌][Preceding technical literature]
[특허문헌][Patent Documents]
한국공개특허 제10-2005-0026769호Korean Patent Publication No. 10-2005-0026769
본 발명은 회차 단위의 단일 이미지로 구성된 온라인 만화 컨텐츠를 분할하거나 서로 다른 회차의 이미지를 조합하여 구성한 불법 복제 컨텐츠에 대해서도 용이하게 특징점을 추출할 수 있을 뿐만 아니라 온라인 만화 컨텐츠로부터 추출한 특징점과 연산량 및 처리시간을 대폭 줄이면서 상호 비교할 수 있도록 지원하여 불법 복제 컨텐츠를 정확히 식별하고 이를 통해 불법 복제 컨텐츠의 유통을 차단할 수 있도록 지원하는데 그 목적이 있다.The present invention can not only extract feature points easily, but also extract illegal points from online comic content by dividing the online comic content consisting of a single image of each unit or by combining images of different episodes, as well as feature points, calculation amounts, and processing from the online comic content. The goal is to help identify the counterfeit content accurately and to block the distribution of the counterfeit content by supporting the comparison with each other while greatly reducing the time.
또한, 본 발명은 온라인 만화 컨텐츠에서 추출한 특징점을 기초로 불법 복제 컨텐츠와 비교하여, 불법 복제 컨텐츠에 해당되는 회차를 용이하게 구분할 수 있으며, 이를 통해 해당 회차 다음에 해당하는 회차의 불법 복제 컨텐츠로부터 특징점을 추출하여 정확하고 연속적인 회차 단위의 컨텐츠 비교가 가능하도록 지원하여 불법 복제 컨텐츠의 정확한 식별이 이루어지도록 지원하는데 그 목적이 있다.In addition, the present invention can easily distinguish the episode corresponding to the illegal copy content based on the feature point extracted from the online comic content, and thus, the feature point from the illegal copy content of the next round after the corresponding episode. The purpose is to support accurate identification of illegally copied contents by extracting and supporting accurate and continuous comparison of contents in each series.
본 발명의 실시예에 따른 불법 복제된 온라인 만화 식별 시스템은 서로 다른 각 온라인 만화 컨텐츠에 대응되어 회차별 원본 이미지의 특징점에 대한 회차별 기준 특징점 정보가 상기 온라인 만화 컨텐츠에 대한 컨텐츠 정보와 매칭되어 저장된 저장부와, 식별 대상 컨텐츠를 수신하고, 상기 식별 대상 컨텐츠를 구성하는 하나 이상의 식별 대상 이미지를 추출하는 이미지 추출부와, 상기 각 식별 대상 이미지에 지정된 파일명에 따라 식별 대상 이미지의 순서를 식별하고, 미리 설정된 정규화 크기에 따라 하나의 상기 식별 대상 이미지 또는 상기 순서를 기초로 연속되는 복수의 식별 대상 이미지를 대상으로 크기 조절, 결합 및 분할 중 적어도 하나를 통해 상기 정규화 크기를 가진 이미지로 정규화한 정규화 이미지를 생성하는 정규화부 및 상기 정규화 이미지로부터 특징점을 추출하여 정규화 특징점 정보를 생성하고, 상기 저장부에 저장된 기준 특징점 정보와 비교하여 일치하는 기준 특징점 정보에 매칭된 컨텐츠 정보를 추출하여, 상기 식별 대상 컨텐츠를 상기 컨텐츠 정보에 대응되는 불법 복제 컨텐츠로 판단하는 판단부를 포함할 수 있다.In accordance with an embodiment of the present invention, an illegally copied online comic book identification system corresponds to each of the different online comic book contents and stores the reference reference feature points for the feature points of the original video images, which are matched with the content information of the online comic book content. A storage unit, an image extraction unit which receives identification target content, extracts one or more identification target images constituting the identification target content, and identifies a sequence of identification target images according to file names specified in the identification target images, A normalized image normalized to one image to be identified with an image having the normalized size through at least one of resizing, combining, and dividing a plurality of identification target images based on the sequence or a plurality of identification target images based on the order according to a preset normalization size Normalization unit for generating and the normalization Extracts feature points from an image to generate normalized feature point information, extracts content information matched with reference feature point information that matches the reference feature point information stored in the storage unit, and extracts the identification target content corresponding to the content information. It may include a determination unit for determining the duplicate content.
본 발명과 관련된 일 예로서, 상기 저장부는 상기 회차별로 기준 특징점 정보와 매칭되는 회차정보를 저장하며, 상기 판단부는 상기 정규화 특징점 정보와 일치하는 기준 특징점 정보에 매칭된 회차정보를 상기 컨텐츠 정보와 함께 제공하는 것을 특징으로 할 수 있다.As an example related to the present disclosure, the storage unit may store turn information matched with reference feature point information for each turn, and the determination unit may include turn information matched with reference feature point information that matches the normalized feature point information with the content information. It may be characterized by providing.
본 발명과 관련된 일 예로서, 상기 판단부는 상기 이미지 추출부 및 정규화부와 연동하여 복수의 정규화 이미지를 생성한 후 상기 각 정규화 이미지에 대응되어 생성된 정규화 특징점 정보를 상기 저장부에 저장된 기준 특징점 정보와 비교하여 어느 하나의 특정 온라인 만화 컨텐츠에 대응되어 상기 정규화 특징점 정보와 기준 특징점 정보가 상호 일치하는 개수가 미리 설정된 개수 이상인 경우 상기 식별 대상 컨텐츠를 상기 특정 온라인 만화 컨텐츠에 대한 불법 복제 컨텐츠로 판단하고, 상기 특정 온라인 만화 컨텐츠에 대한 컨텐츠 정보를 제공하는 것을 특징으로 할 수 있다.As an example related to the present invention, the determination unit generates a plurality of normalized images in association with the image extracting unit and the normalizing unit, and then stores the normalized feature point information corresponding to each normalized image and stored in the storage unit. When the number of correspondence between the normalized feature point information and the reference feature point information corresponding to any one specific online cartoon content is greater than or equal to a preset number, the identification target content is determined as illegal copy content for the specific online cartoon content. And providing content information on the specific online cartoon content.
본 발명과 관련된 일 예로서, 상기 판단부는 동일 컨텐츠 정보에 매칭되는 상기 복수의 기준 특징점 정보를 회차정보에 따른 회차 순서에 따라 정렬한 후 상호 인접한 기준 특징점 정보를 상호 결합한 전체 특징점 정보를 생성하고, 상기 정규화 특징점 정보를 상기 전체 특징점 정보에 대하여 슬라이딩 방식으로 스캔하여 상기 정규화 특징점 정보에 일치되는 기준 특징점 정보를 식별하는 것을 특징으로 할 수 있다.As an example related to the present invention, the determination unit generates the total feature point information by combining the plurality of reference feature point information matching the same content information according to a turn order according to the turn information and then combining adjacent reference feature point information with each other, The normalized feature point information may be scanned in a sliding manner with respect to the entire feature point information to identify reference feature point information corresponding to the normalized feature point information.
본 발명과 관련된 일 예로서, 상기 정규화부는 상기 식별 대상 이미지의 크기를 상기 정규화 크기에 따른 미리 설정된 사이즈의 가로 기준으로 조절하는 것을 특징으로 할 수 있다.As an example related to the present invention, the normalization unit may adjust the size of the identification target image based on a horizontal reference of a preset size according to the normalization size.
본 발명과 관련된 일 예로서, 상기 정규화부는 상기 식별 대상 이미지의 크기를 상기 정규화 크기에 따른 미리 설정된 비율의 가로 기준으로 조절하는 것을 특징으로 할 수 있다.As an example related to the present invention, the normalization unit may adjust the size of the identification target image based on a horizontal reference of a preset ratio according to the normalization size.
본 발명과 관련된 일 예로서, 상기 정규화부는 상기 크기 조절에 따른 식별 대상 이미지의 크기 또는 결합된 복수의 식별 대상 이미지의 크기가 상기 정규화 크기를 초과하는 경우 상기 정규화 크기를 초과하는 영역을 분할하여 상기 정규화 크기에 대응되는 정규화 이미지를 생성하는 것을 특징으로 할 수 있다.As an example related to the present invention, when the size of the identification target image or the combined size of the plurality of identification target images according to the size exceeds the normalization size, the normalization unit divides an area exceeding the normalization size by the division; It may be characterized by generating a normalized image corresponding to the normalized size.
본 발명과 관련된 일 예로서, 상기 판단부는 상기 식별 대상 컨텐츠의 생성 일자와 상기 컨텐츠 정보에 포함된 생성일자를 비교하여 상기 식별 대상 컨텐츠의 생성 일자 이후에 생성된 컨텐츠 정보에 매칭된 기준 특징점 정보를 비교 대상에서 제외하는 것을 특징으로 할 수 있다.As an example related to the present invention, the determination unit compares a creation date of the identification target content with a creation date included in the content information, and compares reference feature point information matched with content information generated after the creation date of the identification target content. It may be characterized by excluding from the comparison.
본 발명의 실시예에 따른 온라인 만화 컨텐츠를 복제한 불법 복제 컨텐츠를 식별하는 장치의 불법 복제된 온라인 만화 식별 방법은, 상기 온라인 만화 컨텐츠를 구성하는 회차별 원본 이미지에 대한 특징점을 추출하여 기준 특징점 정보를 생성하고, 상기 기준 특징점 정보에 해당되는 회차정보 및 컨텐츠 정보와 상호 매칭하여 DB에 저장하는 단계와, 식별 대상 컨텐츠를 수신하고, 상기 식별 대상 컨텐츠를 구성하는 하나 이상의 식별 대상 이미지를 추출하는 단계와, 상기 각 식별 대상 이미지에 지정된 파일명에 따라 식별 대상 이미지의 순서를 식별하고, 미리 설정된 정규화 크기에 따라 하나의 상기 식별 대상 이미지 또는 상기 순서를 기초로 연속되는 복수의 식별 대상 이미지를 대상으로 크기 조절, 결합 및 분할 중 적어도 하나를 통해 상기 정규화 크기를 가진 이미지로 정규화한 정규화 이미지를 생성하는 단계 및 상기 정규화 이미지로부터 특징점을 추출하여 정규화 특징점 정보를 생성하고, 상기 DB에 저장된 기준 특징점 정보와 비교하여 일치하는 기준 특징점 정보에 매칭된 컨텐츠 정보를 추출하여, 상기 식별 대상 컨텐츠를 상기 컨텐츠 정보에 대응되는 불법 복제 컨텐츠로 판단하는 단계를 포함할 수 있다.According to an embodiment of the present invention, the illegally copied online comic book identification method of the apparatus for identifying illegally copied content copying the online comic book content includes extracting feature points of the original image for each episode constituting the online comic book content. Generating an image, matching the turn information and the content information corresponding to the reference feature point information, and storing the same in a DB; receiving identification content; and extracting at least one identification image constituting the identification content. And identify the order of the identification target image according to the file name assigned to each identification target image, and size the target image or a plurality of consecutive identification target images based on the identification target image according to a preset normalized size. The regular through at least one of adjusting, combining, and dividing Generating a normalized image normalized to an image having a size and extracting a feature point from the normalized image to generate normalized feature point information, and comparing content information matched with reference feature point information matched with reference feature point information stored in the DB. And extracting the content to be identified as illegal copy content corresponding to the content information.
본 발명과 관련된 일 예로서, 상기 판단하는 단계는 상기 정규화 특징점 정보와 일치하는 기준 특징점 정보에 매칭되어 상기 DB에 저장된 회차정보를 상기 컨텐츠 정보와 함께 제공하는 것을 특징으로 할 수 있다.As an example related to the present invention, the determining may include providing the turn information stored in the DB along with the reference feature point information that matches the normalized feature point information together with the content information.
본 발명은 온라인 만화 컨텐츠를 불법 복제한 불법 복제 컨텐츠를 구성하는 연속된 이미지를 상기 온라인 만화 컨텐츠를 구성하는 원본 이미지와 비교 가능한 미리 설정된 크기로 정규화하여 특징점을 추출한 후 원본 이미지로부터 추출된 특징점과 순차적으로 비교함으로써 원본 이미지를 다양한 형태로 복제하더라도 용이하게 복제된 이미지와 일치하는 원본 이미지를 식별하여 불법 복제 컨텐츠를 검출할 수 있을 뿐만 아니라 복제된 이미지에 해당하는 온라인 만화 컨텐츠의 회차에 대한 정보까지 제공함으로써 불법 복제 컨텐츠의 식별에 대한 정확도를 높이는 동시에 불법 복제 컨텐츠의 유통을 차단할 수 있도록 지원할 수 있는 효과가 있다.The present invention extracts feature points by normalizing a sequence of images constituting illegally copied content illegally copying online cartoon content to a preset size comparable to the original image constituting the online cartoon content, and sequentially extracts the feature points from the original image. By comparing the original image with various forms, the original image can be easily identified by identifying the original image that matches the duplicated image, and also provides information on the turnover of online cartoon content corresponding to the duplicated image. As a result, the accuracy of identification of illegally copied contents can be increased, and at the same time, the distribution of illegally copied contents can be blocked.
또한, 본 발명은 불법 복제 컨텐츠를 구성하는 복수의 이미지를 정규화하여 복수의 정규화 이미지를 생성하고, 각 정규화 이미지로부터 추출된 특징점을 온라인 만화 컨텐츠를 구성하는 각 원본 이미지의 특징점에 대하여 순차적으로 스캔하여 각 정규화 이미지에 일치하는 온라인 만화 컨텐츠의 회차를 용이하고 정확하게 식별할 수 있으며, 이를 통해 불법 복제 컨텐츠를 구성하는 소수의 이미지를 이용하여 생성한 소수의 정규화 이미지를 이용하더라도 특징점 비교를 통해 불법 복제 컨텐츠에 해당하는 온라인 만화 컨텐츠 및 해당 회차를 정확하게 식별할 수 있을 뿐 아니라 기존과 같이 불법 복제 컨텐츠에 속한 모든 이미지를 대상으로 특징점을 추출할 필요가 없어 연산량 및 처리 시간을 대폭 감소시켜 불법 복제 컨텐츠의 식별을 위한 신뢰성 및 효율을 향상시키는 효과가 있다.Also, the present invention generates a plurality of normalized images by normalizing a plurality of images constituting the illegally copied content, and sequentially scans the feature points extracted from each normalized image with respect to the feature points of each original image constituting the online cartoon content. It is possible to easily and accurately identify the turn of online cartoon content that matches each normalized image, and through this, even when using a small number of normalized images generated by using a small number of images constituting the pirated content, the illegal content is compared through feature point comparison. It is not only able to accurately identify the online cartoon content and the corresponding turn, but also eliminates the need to extract the feature points for all the images belonging to the pirated content as in the past. Reliability for It is effective for improving the efficiency.
도 1은 본 발명의 실시예에 따른 불법 복제된 온라인 만화 식별 시스템의 구성도.1 is a block diagram of an illegally copied online cartoon identification system according to an embodiment of the present invention.
도 2는 본 발명의 실시예에 따른 불법 복제된 온라인 만화 식별 시스템의 온라인 만화 컨텐츠에 대한 DB 구축 과정을 도시한 예시도.2 is an exemplary diagram illustrating a DB construction process for online cartoon content of an illegally copied online cartoon identification system according to an embodiment of the present invention.
도 3은 본 발명의 실시예에 따른 불법 복제된 온라인 만화 식별 시스템의 정규화 과정에 대한 예시도.Figure 3 is an illustration of a normalization process of the illegal online copy identification system according to an embodiment of the present invention.
도 4는 본 발명의 실시예에 따른 불법 복제된 온라인 만화 식별 시스템의 불법 복제 컨텐츠 검출 과정에 대한 예시도.4 is an exemplary diagram for a process of detecting illegally copied contents of an illegally copied online cartoon identification system according to an embodiment of the present invention.
도 5 내지 7은 본 발명의 실시예에 따른 불법 복제된 온라인 만화 식별 시스템의 특징점 비교에 대한 다양한 실시예를 도시한 예시도.5 to 7 are exemplary views showing various embodiments of feature point comparison of an illegally copied online comic book identification system according to an embodiment of the present invention.
도 8은 본 발명의 실시예에 따른 불법 복제된 온라인 만화 식별 방법에 대한 순서도.8 is a flowchart illustrating a method for identifying an illegally copied online comic book according to an embodiment of the present invention.
기존의 종이로 구성된 만화책을 불법 스캔하여 생성한 이미지 파일 형태의 불법 스캔 만화를 구성하는 복수의 이미지에서 연속된 각 이미지의 특징점을 추출한 후 원본만화를 구성하는 각 이미지에서 추출된 특징점과 순서대로 비교함으로써 일치 여부에 따라 불법 복제 컨텐츠를 식별하는 기술의 경우 불법 스캔 만화와 원본 만화 각각 구성되는 이미지의 페이지 구분이 명확할 뿐만 아니라 크기 비율 또한 명확하여 스캔 만화와 원본 만화로부터 추출된 특징점 비교가 용이하며 이를 통해 손쉽게 불법 스캔 만화를 식별할 수 있다.Extract the feature points of each consecutive image from a plurality of images constituting the illegally scanned cartoon in the form of an image file generated by illegally scanning a comic book composed of conventional paper, and compare them in order with the feature points extracted from each image constituting the original cartoon Therefore, in the case of the technology of identifying the pirated contents according to the match, the page divisions of the images composed of the illegally scanned cartoons and the original cartoons are clearly distinguished, and the size ratio is also clear, making it easy to compare feature points extracted from the scanned cartoons and the original cartoons. This makes it easy to identify illegal scan comics.
그러나, 종이를 거치지 않고 이미지 형태로 직접 온라인에 게재되는 웹툰(web toon)과 같은 온라인(online) 만화 컨텐츠(contents)의 경우 페이지 구분없이 회차 단위의 단일 이미지로 구성되고 상기 단일 이미지의 크기 또한 회차마다 상이하게 구성될 수 있다.However, in the case of online cartoon content such as web toon that is directly displayed online in the form of an image without going through a paper, it is composed of a single image of a unit without page division and the size of the single image is also repeated. It can be configured differently every time.
이에 더하여, 상기 온라인 만화 컨텐츠를 불법 복제하는 무권리자는 상기 각 회차의 단일 이미지를 캡처한 후 다양한 크기로 분할하여 복수의 이미지 파일로 생성하고 상기 복수의 이미지 파일을 단일 파일로 묶어 불법 복제 컨텐츠를 생성하여 무단 배포하는 형식을 취한다.In addition, an unauthorized person who illegally copies the online cartoon content may capture a single image of each round and divide the image into various sizes to generate a plurality of image files, and bundle the plurality of image files into a single file to generate illegal content. Take the form of unauthorized distribution.
이로 인해, 원본 이미지와 불법 복제 컨텐츠를 구성하는 복제 이미지 상호간에 크기 비율이 일치하지 않을 뿐만 아니라 페이지 단위로 구성되어 식별이 용이한 스캔만화와 달리 해당 복제 이미지는 원본 만화를 구성하는 단일 이미지를 복수 이미지로 분할한 형태로 구성되거나 복수 회차에 속한 이미지 일부를 결합한 형태로 구성되어 복제 이미지가 어느 회차에 속해 있는지도 식별 불가능하기 때문에 원본 이미지와 복제 이미지간의 특징점 추출을 통한 일대일 매칭이 불가능하여 기존의 불법 스캔 만화의 식별에 이용되는 검출 방식을 온라인 만화 컨텐츠를 불법 복제한 컨텐츠를 검출하기 위해 적용하는데 어려움이 있다.Because of this, the size ratio does not match between the original image and the cloned image constituting the counterfeit content, and unlike the scan comic, which is organized in units of pages and is easy to identify, the duplicated image contains a plurality of single images constituting the original cartoon. It is composed of a divided image or a combination of images belonging to multiple rounds, so it is impossible to identify which round the duplicated image belongs to. Therefore, one-to-one matching is not possible by extracting feature points between the original image and the duplicated image. It is difficult to apply a detection method used for identification of scan comics to detect content that illegally copies online comic content.
따라서, 본 발명은 온라인 만화 컨텐츠를 불법 복제한 불법 복제 컨텐츠를 용이하고 정확하게 식별할 수 있는 방안을 제시한다.Accordingly, the present invention proposes a method for easily and accurately identifying illegally copied contents that are illegally copied online cartoon contents.
이하, 본 발명의 상세 실시예를 도면을 참고하여 설명한다.Hereinafter, a detailed embodiment of the present invention will be described with reference to the drawings.
도 1은 본 발명의 실시예에 따른 불법 복제된 온라인 만화 식별 시스템의 구성도로서, 도시된 바와 같이 이미지 추출부(110), 정규화부(120), 판단부(130)를 포함할 수 있다.1 is a block diagram of an illegally copied online comic book identification system according to an embodiment of the present invention, and may include an image extraction unit 110, a normalization unit 120, and a determination unit 130 as shown.
우선, 도 2에 도시된 바와 같이 이미지 추출부(110)는 저작권이 있는 온라인 만화 컨텐츠를 구성하는 회차별 원본 이미지를 추출하여, 상기 판단부(130)로 제공할 수 있다.First, as shown in FIG. 2, the image extractor 110 may extract the original image of each episode constituting the copyrighted online comic content and provide the same to the determiner 130.
이때, 서로 다른 회차의 원본 이미지 상호 간에는 생성일자 또는 게재일자가 상이하도록 구성될 수 있다.In this case, the creation date or publication date may be different from each other in the original images of different rounds.
또한, 상기 이미지 추출부(110)는 외부로부터 상기 온라인 만화 컨텐츠에 대한 컨텐츠 정보 및 각 원본 이미지의 회차에 대한 회차정보를 수신하여 상기 판단부(130)로 제공할 수 있다.In addition, the image extraction unit 110 may receive the content information on the online cartoon content and the turn information of the turn of each original image from the outside to provide to the determination unit 130.
한편, 판단부(130)는 상기 회차별 원본 이미지로부터 특징점을 추출하여 각 회차의 원본 이미지에 대한 기준 특징점 정보를 생성한 후 컨텐츠 DB(140)에 상기 온라인 만화 컨텐츠에 대한 컨텐츠 정보에 매칭하여 저장할 수 있다.On the other hand, the determination unit 130 extracts the feature points from the original image for each turn, generates reference feature point information for the original image of each turn, and matches and stores the content information for the online cartoon content in the content DB 140. Can be.
또한, 상기 판단부(130)는 각 회차의 기준 특징점 정보에 대응되는 원본 이미지의 회차 정보를 기준 특징점 정보와 매칭하여 컨텐츠 DB(140)에 저장할 수 있다.In addition, the determination unit 130 may match the turn information of the original image corresponding to the reference feature point information of each turn with the reference feature point information and store it in the content DB 140.
즉, 상기 불법 복제된 온라인 만화 식별 시스템은 저작권이 있는 서로 다른 각 온라인 만화 컨텐츠에 대응되어 회차별로 특징점을 추출하고, 이에 대한 정보를 컨텐츠 DB(140)에 저장하여 관리할 수 있다.That is, the illegally copied online comic book identification system may extract feature points for each time corresponding to different copyrighted online comic book contents, and store and manage information on the content DB 140 in the content DB 140.
이에 따라, 상기 불법 복제된 온라인 만화 식별 시스템은 컨텐츠 DB(140)에 저장된 온라인 만화 컨텐츠에 대한 특징점 정보를 기초로 외부로부터 수집되는 온라인 만화 컨텐츠를 불법 복제하여 생성한 불법 복제 컨텐츠를 식별하여 해당 불법 복제 컨텐츠의 유통을 사전 차단할 수 있도록 지원할 수 있다.Accordingly, the illegally copied online comic book identification system identifies illegally copied content generated by illegally copying online comic book content collected from the outside based on the feature point information of the online comic book content stored in the content DB 140, and corresponding illegal It can help block the distribution of duplicated content in advance.
이를 위해, 상기 이미지 추출부(110)는 불법 복제 컨텐츠인지 여부에 대한 식별 대상인 식별 대상 컨텐츠를 수신하고, 상기 식별 대상 컨텐츠를 구성하는 복수의 식별 대상 이미지 중 일부를 추출한 후 정규화부(120)로 제공할 수 있다.To this end, the image extraction unit 110 receives the identification target content that is the identification target of whether the content is illegal copying content, extracts a part of the plurality of identification target images constituting the identification target content to the normalization unit 120 Can provide.
이에 따라, 정규화부(120)는 상기 이미지 추출부(110)로부터 제공되는 하나 이상의 식별 대상 이미지를 기초로 크기 조절, 결합 및 분할 중 적어도 하나를 통해 상기 기준 특징점 정보와 비교 가능하도록 미리 설정된 크기로 정규화한 정규화 이미지를 생성하고, 이를 상기 판단부(130)로 제공할 수 있다.Accordingly, the normalization unit 120 may have a preset size to be comparable with the reference feature point information through at least one of scaling, combining, and dividing based on one or more identification target images provided from the image extraction unit 110. A normalized normalized image may be generated and provided to the determination unit 130.
한편, 상기 판단부(130)는 상기 정규화 이미지에서 특징점을 추출하여 이에 대한 정규화 특징점 정보를 생성한 후 상기 DB(140)에 저장된 특징점 정보와 비교할 수 있다.Meanwhile, the determination unit 130 may extract feature points from the normalized image, generate normalized feature point information thereof, and compare the feature points with the feature point information stored in the DB 140.
이를 통해, 상기 판단부(130)는 정규화 특징점 정보와 일치하는 특징점 정보가 존재하는 경우 해당 특징점 정보에 매칭된 컨텐츠 정보를 추출하여 제공할 수 있으며, 이를 통해 상기 식별 대상 컨텐츠가 상기 컨텐츠 정보에 대응되는 온라인 만화 컨텐츠를 불법 복제한 불법 복제 컨텐츠인 것으로 판단할 수 있다.In this way, when there is feature point information that matches the normalized feature point information, the determination unit 130 may extract and provide content information matched with the feature point information, whereby the identification target content corresponds to the content information. The online comic content can be determined to be illegal copy content that is illegally copied.
이때, 상기 불법 복제된 온라인 만화 식별 시스템은 서버와 같은 장치에 구성되거나 별도의 장치로 구성되어 상기 서버와 같은 다른 장치와 연동하거나 연결되어 본 발명에서 설명하는 동작을 수행할 수 있다.In this case, the illegally copied online cartoon identification system may be configured in a device such as a server or as a separate device to interwork or connect with another device such as the server to perform the operation described in the present invention.
또한, 상기 불법 복제된 온라인 만화 식별 시스템은 다양한 컨텐츠가 게재되는 다양한 웹 포탈 서버나 OSP(Online Service Provider)와 같은 다양한 컨텐츠 공유 서버로부터 온라인 만화와 관련된 불법 복제 컨텐츠, 컨텐츠 정보 및 회차정보를 수집하기 위한 수집부를 더 포함할 수 있으며, 상기 이미지 추출부(110), 정규화부(120) 및 판단부(130)는 상기 수집부로부터 수집된 식별 대상 컨텐츠를 대상으로 불법 복제 컨텐츠인지 여부를 식별하고 검출할 수 있다.In addition, the illegally copied online cartoon identification system collects illegal content, content information, and turnaround information related to online cartoons from various web portal servers or various content sharing servers such as OSPs (Online Service Providers) where various contents are displayed. The image extracting unit 110, the normalization unit 120, and the determination unit 130 may identify and detect whether the content is illegal copy content with respect to the identification target content collected from the collection unit. can do.
이하, 상술한 구성을 토대로 본 발명의 실시예에 따른 불법 복제된 온라인 만화 식별 시스템의 상세 동작을 이하 도면을 참고하여 설명한다.Hereinafter, the detailed operation of the illegally copied online comic book identification system according to the embodiment of the present invention will be described with reference to the accompanying drawings.
우선, 도 3은 불법 복제된 온라인 만화 식별 시스템의 정규화 과정을 도시한 도면으로서, 도시된 바와 같이 상기 이미지 추출부(110)는 외부로부터 식별 대상 컨텐츠를 수신하고, 상기 식별 대상 컨텐츠로부터 연속된 하나 이상의 식별 대상 이미지를 선택한 후 추출할 수 있다.First, FIG. 3 is a diagram illustrating a normalization process of an illegally copied online comic book identification system. As illustrated, the image extracting unit 110 receives an identification target content from an external source, and continues from the identification target content. After selecting the above-described identification target image can be extracted.
이때, 상기 식별 대상 컨텐츠는 복수의 식별 대상 이미지로 구성될 수 있으며, 각 식별 대상 이미지는 JPEG, GIF, BMP, PNG, ICO 등의 확장자를 가지는 이미지 파일로 구성될 수 있다.In this case, the identification target content may be composed of a plurality of identification target images, each identification target image may be composed of an image file having an extension such as JPEG, GIF, BMP, PNG, ICO.
또한, 이미지 추출부(110)는 상기 식별 대상 컨텐츠가 압축파일인 경우 자체적으로 압축을 해제하여 식별 대상 이미지를 추출할 수 있다.In addition, when the identification target content is a compressed file, the image extraction unit 110 may extract the identification target image by decompressing itself.
한편, 상기 정규화부(120)는 이미지 추출부(110)와 연동하여 하나 이상의 식별 대상 이미지를 각 식별 대상 이미지에 부여된 순서대로 추출할 수 있으며, 식별 대상 이미지의 순서는 식별 대상 이미지에 부여된 파일명을 기초로 판단(식별)할 수 있으나 이에 한정되지 않고 다양한 순서 판별 방식이 적용될 수 있다.Meanwhile, the normalization unit 120 may extract one or more identification target images in the order assigned to each identification target image in cooperation with the image extraction unit 110, and the order of the identification target images may be assigned to the identification target image. The determination may be made based on the file name, but various order determination methods may be applied without being limited thereto.
또한, 상기 정규화부(120)는 온라인 만화 컨텐츠에 대응되는 원본 이미지로부터 추출된 특징점과 식별 대상 이미지로부터 추출되는 특징점의 비교를 용이하게 하기 위해 상기 이미지 추출부(110)로부터 수신되는 하나의 식별 대상 이미지 또는 순서가 연속되는 복수의 식별 대상 이미지를 대상으로(이용하여) 미리 설정된 정규화 크기에 따라 크기 조절, 결합 및 분할 중 적어도 하나를 통해 상기 정규화 크기를 가진 정규화 이미지를 생성할 수 있다.In addition, the normalization unit 120 is one identification object received from the image extraction unit 110 to facilitate the comparison between the feature point extracted from the original image corresponding to the online cartoon content and the feature image extracted from the identification target image. A normalized image having the normalized size may be generated by at least one of scaling, combining, and dividing the image or a plurality of images to be identified in sequence according to a preset normalized size.
이때, 상기 정규화부(120)는 비율 및 사이즈 중 적어도 하나를 기준으로 상기 식별 대상 이미지의 크기를 조절할 수 있으며, 상기 비율 및 사이즈는 가로 기준으로 조절되는 것이 바람직하다.In this case, the normalization unit 120 may adjust the size of the identification target image based on at least one of the ratio and the size, and the ratio and the size may be adjusted based on the horizontal basis.
일례로, 상기 정규화부(120)는 미리 설정된 정규화 크기(예: 720×20,000 픽셀)에 대응되어 상기 이미지 추출부(110)로부터 수신된 제 1 식별 대상 이미지(01.jpg)의 사이즈를 상기 정규화 크기의 가로 기준으로 조절할 수 있다.For example, the normalization unit 120 normalizes the size of the first identification target image (01.jpg) received from the image extraction unit 110 in correspondence with a preset normalization size (for example, 720 × 20,000 pixels). You can adjust the size relative to the horizontal.
이때, 상기 정규화부(120)는 상기 제 1 식별 대상 이미지(01.jpg)의 사이즈 조절에 따른 세로 크기가 상기 정규화 크기에 따른 세로 크기보다 작은 경우 상기 이미지 추출부(110)와 연동하여 상기 제 1 식별 대상 이미지(01.jpg)의 다음 순서에 해당되는 제 2 식별 대상 이미지(02.jpg)를 추출하여 수신하고, 상기 제 2 식별 대상 이미지(02.jpg)의 크기를 상기 정규화 크기에 따라 조절하여 상기 제 1 식별 대상 이미지(01.jpg)와 결합할 수 있다.In this case, when the vertical size according to the size adjustment of the first identification target image (01.jpg) is smaller than the vertical size according to the normalization size, the normalization unit 120 interoperates with the image extraction unit 110. 1 Extract and receive a second identification image (02.jpg) corresponding to the next sequence of the identification image (01.jpg), and adjust the size of the second identification image (02.jpg) according to the normalized size. It may be adjusted to combine with the first identification target image (01.jpg).
또한, 상기 정규화부(120)는 상기 제 1 식별 대상 이미지(01.jpg)와 상기 제 2 식별 대상 이미지(02.jpg)의 결합에 따른 결합 이미지의 크기가 상기 정규화 크기를 초과하는 경우 상기 정규화 크기를 초과하는 제 2 식별 대상 이미지(02.jpg)의 일부 영역을 분할하여 정규화 크기에 대응되는 정규화 이미지를 생성할 수 있다.In addition, the normalization unit 120 normalizes when the size of the combined image according to the combination of the first identification image (01.jpg) and the second identification image (02.jpg) exceeds the normalization size. A partial region of the second identification target image (02.jpg) exceeding the size may be divided to generate a normalized image corresponding to the normalized size.
또한, 상기 정규화부(120)는 상기 제 2 식별 대상 이미지(02.jpg)로부터 분할된 일부 이미지를 상기 제 2 식별 대상 이미지(02.jpg)의 다음 순서에 해당하는 식별 대상 이미지와 결합하여 다른 정규화 이미지를 생성할 수 있다.In addition, the normalization unit 120 combines the partial image divided from the second identification target image (02.jpg) with the identification target image corresponding to the next sequence of the second identification target image (02.jpg), and then the other. You can create a normalized image.
한편, 상기 정규화부(120)는 상기 정규화 이미지를 판단부(130)로 제공할 수 있으며, 판단부(130)는 상기 정규화 이미지로부터 특징점을 추출하여 상기 컨텐츠 DB(140)에 저장된 기준 특징점 정보와 비교하며, 일치 여부에 따라 상기 정규화 이미지에 대응되는 식별 대상 컨텐츠가 불법 복제 컨텐츠인지 여부를 판단할 수 있는데, 이에 대한 동작 구성을 도 4를 통해 상세히 설명한다.Meanwhile, the normalization unit 120 may provide the normalized image to the determination unit 130, and the determination unit 130 extracts a feature point from the normalization image and stores the reference feature point information stored in the content DB 140. In comparison, it is possible to determine whether the identification target content corresponding to the normalized image is illegal copy content according to the match, and an operation configuration thereof will be described in detail with reference to FIG. 4.
도 4(a)에 도시된 바와 같이, 상기 판단부(130)는 상기 정규화부(120)로부터 제공되는 정규화 이미지로부터 특징점을 추출하여 정규화 특징점 정보를 생성하고, 상기 정규화 특징점 정보를 컨텐츠 DB(140)에 저장된 각 온라인 만화 컨텐츠에 대응되는 기준 특징점 정보와 비교할 수 있다.As shown in FIG. 4A, the determination unit 130 extracts a feature point from the normalized image provided from the normalization unit 120 to generate normalized feature point information, and generates the normalized feature point information using the content DB 140. ) Can be compared with reference feature point information corresponding to each of the online comic content.
이에 따라, 도 4(b)에 도시된 바와 같이 상기 판단부(130)는 상기 정규화 특징점 정보와 일치하는 기준 특징점 정보가 존재하는 경우 상기 일치된 기준 특징점 정보에 매칭된 컨텐츠 정보를 추출하여 제공할 수 있으며, 이를 통해 식별 대상 컨텐츠가 추출된 컨텐츠 정보에 대응되는 온라인 만화 컨텐츠를 불법 복제한 불법 복제 컨텐츠인 것으로 판단할 수 있다.Accordingly, as illustrated in FIG. 4B, when the reference feature point information matching the normalized feature point information exists, the determination unit 130 may extract and provide content information matched with the matched reference feature point information. Through this, it may be determined that the identification target content is illegal copy content that illegally copies the online cartoon content corresponding to the extracted content information.
또한, 상기 판단부(130)는 상기 정규화 특징점 정보와 일치하는 기준 특징점 정보에 매칭된 회차 정보를 컨텐츠 DB(140)로부터 추출하여 상기 컨텐츠 정보와 함께 제공할 수 있으며, 이를 통해 상기 온라인 만화 컨텐츠를 구성하는 회차 중에서 상기 정규화 이미지에 해당되는 회차를 확인할 수 있도록 제공한다.In addition, the determination unit 130 may extract turn information matched with reference feature point information that matches the normalized feature point information from the content DB 140 and provide the content with the content information, thereby providing the online cartoon content. It is provided to check the round corresponding to the normalized image among the rounds to be configured.
그러나, 상술한 구성에서 하나의 정규화 이미지로부터 추출된 특징점만으로 불법 복제 컨텐츠를 판단하는 경우 불법 복제 컨텐츠의 판단에 대한 정확도가 떨어지므로 이를 보완하기 위하여 이하 설명하는 구성을 보완할 수 있다.However, in the above-described configuration, if the illegal content is determined only by the feature points extracted from one normalized image, the accuracy of the determination of the illegal content is reduced, and thus the configuration described below may be supplemented.
우선, 도 5에 도시된 바와 같이 상기 판단부(130)는 하나 이상의 연속되는 식별 대상 이미지에 대하여 크기 조절, 결합 및 분할 중 적어도 하나를 통해 서로 다른 복수의 정규화 이미지를 생성할 수 있으며, 각 정규화 이미지로부터 추출된 정규화 특징점 정보를 기초로 상기 컨텐츠 DB(140)에 저장된 기준 특징점 정보와 비교하여 일치되는 기준 특징점 정보의 존재 여부를 판단할 수 있음은 상술한 바와 같다.First, as illustrated in FIG. 5, the determination unit 130 may generate a plurality of normalized images that are different from each other through at least one of scaling, combining, and dividing one or more consecutive identification target images. As described above, it is possible to determine whether there is matched reference feature point information based on the normalized feature point information extracted from the image, by comparing with the reference feature point information stored in the content DB 140.
이를 통해, 상기 판단부(130)는 각 정규화 이미지로부터 추출된 특징점이 컨텐츠 DB(140)에 저장된 특징점과 모두 일치하는 경우 식별 대상 컨텐츠가 불법 복제 컨텐츠로 판단하여 불법 복제 컨텐츠에 대한 식별 정확도를 높일 수 있다.When the feature points extracted from each normalized image match all of the feature points stored in the content DB 140, the determination unit 130 determines that the identification target content is illegal copy content, thereby increasing the identification accuracy of the illegal copy content. Can be.
그러나, 도시된 바와 같이 제 3 식별 대상 이미지(03.jpg)와 제 4 식별 대상 이미지(04.jpg)를 결합하여 추출된 정규화 특징점 정보 2는 1회차의 기준 특징점 정보와 2회차의 기준 특징점 정보 모두에 존재하므로 1회차의 기준 특징점 정보 및 2회차의 기준 특징점 정보 중 어느 하나와도 일치하지 않아 정규화 특징점 정보 2에 해당되는 특징점이 온라인 만화 컨텐츠에 존재함에도 불구하고 정규화 특징점 정보 2에 해당되는 기준 특징점 정보가 존재하지 않는 것으로 판단되어 불법 복제 컨텐츠가 식별되지 않을 수 있다.However, as shown, the normalized feature point information 2 extracted by combining the third identification image (03.jpg) and the fourth identification image (04.jpg) is the reference feature point information of the first round and the reference feature point information of the second round. Since they exist in both, the criteria corresponding to normalized feature point information 2, even though the feature points corresponding to normalized feature point information 2 exist in online comic content because they do not coincide with any one of the reference feature point information of the first round and the reference feature point information of the second round. It is determined that the feature point information does not exist, and thus the pirated content may not be identified.
이를 위해, 도 6에 도시된 바와 같이 상기 판단부(130)는 상기 이미지 추출부(110) 및 정규화부(120)와 연동하여 식별 대상 컨텐츠를 구성하는 복수의 식별 대상 이미지를 기초로 복수의 정규화 이미지를 생성하고, 각 정규화 이미지에 대응되어 정규화 특징점 추출에 따른 복수의 정규화 특징점 정보를 생성한 후 컨텐츠 DB(140)에 저장된 기준 특징점 정보들과 비교하여 어느 하나의 온라인 만화 컨텐츠에 대응되어 상기 정규화 특징점 정보와 상기 기준 특징점 정보가 상호 일치하는 개수가 미리 설정된 기준 개수 이상인 경우에 해당 온라인 만화 컨텐츠에 대한 불법 복제 컨텐츠로 판단하도록 동작할 수 있다.To this end, as illustrated in FIG. 6, the determination unit 130 may operate in conjunction with the image extraction unit 110 and the normalization unit 120 to form a plurality of normalization images based on a plurality of identification target images constituting identification target content. Generates an image, generates a plurality of normalized feature point information corresponding to each normalized image extraction according to normalized feature points, and compares the normalized feature point information stored in the content DB 140 to correspond to any one of the on-line cartoon contents to normalize the normalized feature point information. When the number of feature point information and the reference feature point information coincide with each other is greater than or equal to a preset reference number, the operation may be determined to be illegal copy content for the online cartoon content.
이를 통해, 상기 판단부(130)는 복수의 정규화 이미지로와 복수의 원본 이미지 사이의 특징점 비교를 통해 일정 개수 이상 특징점이 일치하는 경우에 불법 복제 컨텐츠로 판단하여, 불법 복제 컨텐츠의 식별 정확도를 높임과 동시에 오류 발생률을 낮출 수 있다.In this way, the determination unit 130 determines that the pirated content is more than a predetermined number of feature points by comparing the feature points between the plurality of normalized images and the plurality of original images, thereby increasing the identification accuracy of the pirated content. At the same time, the error rate can be lowered.
한편, 도 7에 도시된 바와 같이 상기 판단부(130)는 상기 온라인 만화 컨텐츠를 구성하는 회차별 각 원본 이미지의 기준 특징점 정보를 회차 순서대로 정렬한 후 상호 인접한 기준 특징점 정보를 상호 결합하여 전체 특징점 정보로 생성할 수 있으며, 이를 통해 상기 정규화 특징점 정보를 기초로 슬라이딩 방식으로 상기 전체 특징점 정보를 스캔(scan)하여 상기 전체 특징점 정보 중에서 상기 정규화 특징점 정보와 일치하는 영역을 식별할 수 있다.Meanwhile, as shown in FIG. 7, the determination unit 130 arranges reference feature point information of each original image for each turn constituting the online comic book content in turn, and then combines adjacent reference feature point information with each other to form a total feature point. Information may be generated, and through this, the entire feature point information may be scanned in a sliding manner based on the normalized feature point information to identify a region that matches the normalized feature point information among the feature points.
즉, 상기 판단부(130)는 정규화 특징점 정보가 서로 다른 기준 특징점 정보에 모두 걸쳐서 존재하는 경우에도 서로 다른 기준 특징점 정보가 상호 연결되어 상기 정규화 특징점 정보와 일치하는 영역을 식별할 수 있으므로, 이를 통해 식별된 영역에 대응되는 복수의 기준 특징점 정보를 식별할 수 있다.That is, even when the normalized feature point information exists over all of the different reference feature information, the determination unit 130 may identify regions where different reference feature points are interconnected and match the normalized feature point information. A plurality of pieces of reference feature points corresponding to the identified regions may be identified.
이에 따라, 상기 판단부(130)는 상기 정규화 특징점 정보와 일치하는 영역을 가진 복수의 기준 특징점 정보를 기초로 컨텐츠 DB(140)에서 해당 복수의 기준 특징점 정보에 각각 매칭되는 복수의 회차정보를 추출하여 제공할 수 있으며, 이를 통해 정규화 특징점 정보가 서로 다른 회차에 모두 존재하는 경우 상기 정규화 특징점 정보에 해당되는 모든 회차에 대한 정보를 제공함으로써 상기 정규화 이미지가 어떤 회차의 원본 이미지에 해당되는지를 판단할 수 있도록 제공한다.Accordingly, the determination unit 130 extracts a plurality of turn information each matching the plurality of reference feature point information from the content DB 140 on the basis of the plurality of reference feature point information having an area that matches the normalized feature point information. If the normalized feature point information is present in all different cycles, it is possible to provide information about all the times corresponding to the normalized feature point information to determine which sequence the normalized image corresponds to. To be provided.
결국, 상기 판단부(130)는 복수의 회차에 걸쳐서 존재하는 정규화 특징점 정보를 서로 다른 회차에 존재하는 기준 특징점 정보와 비교하여 정규화 특징점 정보에 해당되는 복수의 회차를 식별할 수 있어, 각 식별 대상 이미지와 연관되는 온라인 만화 컨텐츠의 회차에 대한 정보를 정확히 제공하는 동시에 불법 복제 컨텐츠의 식별 정확도를 크게 향상시킬 수 있다.As a result, the determination unit 130 may identify the plurality of times corresponding to the normalized feature point information by comparing the normalized feature point information existing over a plurality of times with reference feature point information existing at different times, thereby identifying each target. While accurately providing information on the turn of online cartoon content associated with an image, the identification accuracy of illegally copied content can be greatly improved.
한편, 상술한 구성에서 상기 판단부(130)는 상기 이미지 추출부(110)로부터 상기 온라인 만화 컨텐츠에 대한 컨텐츠 정보를 수신할 수 있으며, 상기 컨텐츠 정보에 포함된 생성일시(또는 게시일시)와 상기 식별 대상 컨텐츠의 생성일시(또는 게시일시)를 비교하여 상기 식별 대상 컨텐츠의 생성일시 이후의 생성일시를 가진 컨텐츠 정보에 대응되는 온라인 만화 컨텐츠에 대한 기준 특징점 정보를 특징점 비교 대상에서 제외시킬 수 있다.On the other hand, in the above-described configuration, the determination unit 130 may receive content information on the online cartoon content from the image extraction unit 110, the creation date (or publication date) and the included in the content information and the By comparing the creation date (or posting date and time) of the content to be identified, reference feature point information on the on-line cartoon content corresponding to the content information having the creation date after the creation date and time of the identification content may be excluded from the feature point comparison object.
이를 통해, 상기 판단부(130)는 식별 대상 컨텐츠에 대하여 DB(140)에 저장된 온라인 만화 컨텐츠와 특징점 비교를 통해 불법 복제 컨텐츠 여부를 식별하는 과정에서 관련 없는 온라인 만화 컨텐츠를 비교 대상에서 제외하여 처리 속도를 향상시킬 수 있다.By doing so, the determination unit 130 excludes irrelevant online cartoon content from the comparison target in the process of identifying whether the content is illegally copied by comparing the online cartoon content stored in the DB 140 with the feature point. Can improve speed.
도 8은 본 발명의 실시예에 따른 불법 복제된 온라인 만화 식별 방법에 대한 순서도로서, 도시된 바와 같이 상기 불법 복제된 온라인 만화 식별 시스템이 구성된 서버는 상기 온라인 만화 컨텐츠를 구성하는 회차별 원본 이미지에 대한 특징점을 추출하여 기준 특징점 정보를 생성하고, 상기 기준 특징점 정보에 해당되는 회차정보 및 컨텐츠 정보와 상호 매칭하여 컨텐츠 DB(140)에 저장할 수 있다(S1).FIG. 8 is a flowchart illustrating a method for identifying an illegally copied online comic book according to an embodiment of the present invention. As illustrated, a server configured with the illegally copied online comic book identification system may be provided in a differential original image constituting the online comic book content. The feature point information may be extracted to generate reference feature point information, and matched with the turn information and the content information corresponding to the reference feature point information may be stored in the content DB 140 (S1).
이후, 상기 서버는 외부로부터 식별 대상 컨텐츠를 수신하고(S2), 상기 식별 대상 컨텐츠를 구성하는 하나 이상의 식별 대상 이미지를 추출할 수 있다(S3).Thereafter, the server may receive identification target content from the outside (S2) and extract one or more identification target images constituting the identification target content (S3).
다음, 상기 서버는 상기 각 식별 대상 이미지에 지정된 파일명에 따라 식별 대상 이미지의 순서를 식별하고, 미리 설정된 정규화 크기에 따라 하나의 상기 식별 대상 이미지 또는 상기 순서를 기초로 연속되는 복수의 식별 대상 이미지를 대상으로 크기 조절, 결합 및 분할 중 적어도 하나를 통해 상기 정규화 크기를 가진 이미지로 정규화한 정규화 이미지를 생성할 수 있다(S4).Next, the server identifies the order of the identification target image according to the file name assigned to each identification target image, and selects one identification target image or a plurality of consecutive identification target images based on the preset normalization size. In operation S4, a normalized image normalized to an image having the normalized size may be generated through at least one of scaling, combining, and dividing.
이후, 상기 서버는 상기 정규화 이미지로부터 특징점을 추출하여 정규화 특징점 정보를 생성하고(S5), 상기 컨텐츠 DB(140)에 저장된 기준 특징점 정보와 비교하여(S6) 일치하는 기준 특징점 정보에 매칭된 컨텐츠 정보를 추출하여(S7), 상기 식별 대상 컨텐츠를 상기 컨텐츠 정보에 대응되는 불법 복제 컨텐츠로 판단할 수 있다(S8).Thereafter, the server extracts the feature points from the normalized image to generate normalized feature point information (S5), compares the reference feature point information stored in the content DB 140 (S6), and matches the content information matched with the reference feature point information. By extracting (S7), the identification target content can be determined as illegal copy content corresponding to the content information (S8).
한편, 상기 서버는 상기 정규화 특징점 정보와 일치하는 기준 특징점 정보가 컨텐츠 DB(140)에 존재하지 않는 경우(S7) 상기 정규화 특징점 정보에 대응되는 각 식별 대상 이미지 중 상기 식별 대상 컨텐츠를 구성하는 전체 식별 대상 이미지의 순서를 기초로 마지막 순서에 해당하는 식별 대상 이미지가 존재하지 판단할 수 있다(S9).On the other hand, if the reference feature point information that matches the normalized feature point information does not exist in the content DB 140 (S7), the server identifies the entire identification of the content to be identified among the identification target images corresponding to the normalized feature point information. On the basis of the order of the target image, it may be determined whether the identification target image corresponding to the last order exists (S9).
이에 따라, 상기 서버는 상기 마지막 순서에 해당하는 식별 대상 이미지가 존재하는 경우(S9) 상기 식별 대상 컨텐츠가 불법 복제 컨텐츠가 아닌 것으로 판단하고 이에 대한 정보를 제공할 수 있으며, 상기 마지막 순서에 해당하는 식별 대상 이미지가 존재하지 않는 경우(S9) 상기 정규화 특징점 정보에 대응되는 각 식별 대상 이미지 중 가장 이후 순서의 식별 대상 이미지에 대응되는 순서를 기준으로 다음 순서에 해당하는 연속된 하나 이상의 식별 대상 이미지를 추출하여(S10) 이를 기초로 다른 정규화 특징점 정보를 생성한 후 상술한 과정을 반복할 수 있다.Accordingly, when the identification target image corresponding to the last sequence exists (S9), the server may determine that the identification target content is not illegal copy content and provide information about the last sequence. When the identification target image does not exist (S9), one or more consecutive identification target images corresponding to the next sequence are selected based on the order corresponding to the identification image of the next order among the identification target images corresponding to the normalized feature point information. By extracting (S10) and generating other normalized feature point information based on this, the above-described process may be repeated.
상술한 바와 같이, 본 발명은 온라인 만화 컨텐츠를 불법 복제한 불법 복제 컨텐츠를 구성하는 연속된 이미지를 상기 온라인 만화 컨텐츠를 구성하는 원본 이미지와 비교 가능한 미리 설정된 크기로 정규화하여 특징점을 추출한 후 원본 이미지로부터 추출된 특징점과 순차적으로 비교함으로써 원본 이미지를 다양한 형태로 복제하더라도 용이하게 복제된 이미지와 일치하는 원본 이미지를 식별하여 불법 복제 컨텐츠를 검출할 수 있을 뿐만 아니라 복제된 이미지에 해당하는 온라인 만화 컨텐츠의 회차에 대한 정보까지 제공함으로써 불법 복제 컨텐츠의 식별에 대한 정확도를 높이는 동시에 불법 복제 컨텐츠의 유통을 차단할 수 있도록 지원할 수 있다.As described above, the present invention normalizes a continuous image constituting the pirated content piracy of the online cartoon content to a preset size comparable to the original image constituting the online cartoon content, and extracts a feature point from the original image. By comparing the extracted feature points sequentially, even if the original image is duplicated in various forms, the original image that matches the duplicated image can be easily identified to detect illegally copied contents, and the online cartoon content corresponding to the duplicated image is returned. By providing information on, it is possible to increase the accuracy of identification of counterfeit content and to block the distribution of counterfeit content.
또한, 본 발명은 불법 복제 컨텐츠를 구성하는 복수의 이미지를 정규화하여 복수의 정규화 이미지를 생성하고, 각 정규화 이미지로부터 추출된 특징점을 온라인 만화 컨텐츠를 구성하는 각 원본 이미지의 특징점에 대하여 순차적으로 스캔하여 각 정규화 이미지에 일치하는 온라인 만화 컨텐츠의 회차를 용이하고 정확하게 식별할 수 있으며, 이를 통해 불법 복제 컨텐츠를 구성하는 소수의 이미지를 이용하여 생성한 소수의 정규화 이미지를 이용하더라도 특징점 비교를 통해 불법 복제 컨텐츠에 해당하는 온라인 만화 컨텐츠 및 해당 회차를 정확하게 식별할 수 있을 뿐 아니라 기존과 같이 불법 복제 컨텐츠에 속한 모든 이미지를 대상으로 특징점을 추출할 필요가 없어 연산량 및 처리 시간을 대폭 감소시킬 수 있다.Also, the present invention generates a plurality of normalized images by normalizing a plurality of images constituting the illegally copied content, and sequentially scans the feature points extracted from each normalized image with respect to the feature points of each original image constituting the online cartoon content. It is possible to easily and accurately identify the turn of online cartoon content that matches each normalized image, and through this, even when using a small number of normalized images generated by using a small number of images constituting the pirated content, the illegal content is compared through feature point comparison. Not only can it accurately identify online comic content corresponding to and its turn, but also need to extract feature points from all images belonging to the pirated content as in the past, thereby greatly reducing the amount of computation and processing time.
본 명세서에 기술된 다양한 장치 및 구성부는 하드웨어 회로(예를 들어, CMOS 기반 로직 회로), 펌웨어, 소프트웨어 또는 이들의 조합에 의해 구현될 수 있다. 예를 들어, 다양한 전기적 구조의 형태로 트랜지스터, 로직게이트 및 전자회로를 활용하여 구현될 수 있다.Various devices and components described herein may be implemented by hardware circuitry (eg, CMOS based logic circuitry), firmware, software, or a combination thereof. For example, it may be implemented using transistors, logic gates, and electronic circuits in the form of various electrical structures.
전술된 내용은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.The above description may be modified and modified by those skilled in the art without departing from the essential characteristics of the present invention. Therefore, the embodiments disclosed in the present invention are not intended to limit the technical idea of the present invention but to describe the present invention, and the scope of the technical idea of the present invention is not limited by these embodiments. The protection scope of the present invention should be interpreted by the following claims, and all technical ideas within the equivalent scope should be interpreted as being included in the scope of the present invention.

Claims (10)

  1. 서로 다른 각 온라인 만화 컨텐츠에 대응되어 회차별 원본 이미지의 특징점에 대한 회차별 기준 특징점 정보가 상기 온라인 만화 컨텐츠에 대한 컨텐츠 정보와 매칭되어 저장된 저장부;A storage unit corresponding to each of the different on-line cartoon contents and storing the reference standard feature information on the feature points of the original image for each episode in correspondence with the content information on the on-line cartoon content;
    식별 대상 컨텐츠를 수신하고, 상기 식별 대상 컨텐츠를 구성하는 하나 이상의 식별 대상 이미지를 추출하는 이미지 추출부;An image extraction unit configured to receive identification target content and extract one or more identification target images constituting the identification target content;
    상기 각 식별 대상 이미지에 지정된 파일명에 따라 식별 대상 이미지의 순서를 식별하고, 미리 설정된 정규화 크기에 따라 하나의 상기 식별 대상 이미지 또는 상기 순서를 기초로 연속되는 복수의 식별 대상 이미지를 대상으로 크기 조절, 결합 및 분할 중 적어도 하나를 통해 상기 정규화 크기를 가진 이미지로 정규화한 정규화 이미지를 생성하는 정규화부; 및Identifying the order of the identification target image according to a file name assigned to each identification target image, and adjusting the size of one identification target image or a plurality of consecutive identification target images based on the order according to a preset normalized size; A normalizer for generating a normalized image normalized to the image having the normalized size through at least one of combining and dividing; And
    상기 정규화 이미지로부터 특징점을 추출하여 정규화 특징점 정보를 생성하고, 상기 저장부에 저장된 기준 특징점 정보와 비교하여 일치하는 기준 특징점 정보에 매칭된 컨텐츠 정보를 추출하여, 상기 식별 대상 컨텐츠를 상기 컨텐츠 정보에 대응되는 불법 복제 컨텐츠로 판단하는 판단부Extracts feature points from the normalized image to generate normalized feature point information, compares the content information matched with the matched reference feature point information stored in the storage unit, and extracts content information corresponding to the matched feature point information to correspond to the content information. Judgment unit judging that illegally copied content
    를 포함하는 불법 복제된 온라인 만화 식별 시스템.Pirated online comics identification system comprising a.
  2. 청구항 1에 있어서,The method according to claim 1,
    상기 저장부는 상기 회차별로 기준 특징점 정보와 매칭되는 회차정보를 저장하며,The storage unit stores turn information matched with reference feature point information for each turn,
    상기 판단부는 상기 정규화 특징점 정보와 일치하는 기준 특징점 정보에 매칭된 회차정보를 상기 컨텐츠 정보와 함께 제공하는 것을 특징으로 하는 불법 복제된 온라인 만화 식별 시스템.And the determination unit provides turn information matched with reference feature point information that matches the normalized feature point information together with the content information.
  3. 청구항 1에 있어서,The method according to claim 1,
    상기 판단부는 상기 이미지 추출부 및 정규화부와 연동하여 복수의 정규화 이미지를 생성한 후 상기 각 정규화 이미지에 대응되어 생성된 정규화 특징점 정보를 상기 저장부에 저장된 기준 특징점 정보와 비교하여 어느 하나의 특정 온라인 만화 컨텐츠에 대응되어 상기 정규화 특징점 정보와 기준 특징점 정보가 상호 일치하는 개수가 미리 설정된 개수 이상인 경우 상기 식별 대상 컨텐츠를 상기 특정 온라인 만화 컨텐츠에 대한 불법 복제 컨텐츠로 판단하고, 상기 특정 온라인 만화 컨텐츠에 대한 컨텐츠 정보를 제공하는 것을 특징으로 하는 불법 복제된 온라인 만화 식별 시스템.The determining unit generates a plurality of normalized images in association with the image extracting unit and the normalizing unit, and compares the normalized feature point information generated corresponding to each normalized image with the reference feature point information stored in the storage unit. If the number corresponding to the cartoon content and the normalized feature point information and the reference feature point information is equal to or greater than a preset number, the identification target content is determined as illegal copy content for the specific online cartoon content, and the Pirated online cartoon identification system, characterized in that to provide content information.
  4. 청구항 1에 있어서,The method according to claim 1,
    상기 판단부는 동일 컨텐츠 정보에 매칭되는 상기 복수의 기준 특징점 정보를 회차정보에 따른 회차 순서에 따라 정렬한 후 상호 인접한 기준 특징점 정보를 상호 결합한 전체 특징점 정보를 생성하고, 상기 정규화 특징점 정보를 상기 전체 특징점 정보에 대하여 슬라이딩 방식으로 스캔하여 상기 정규화 특징점 정보에 일치되는 기준 특징점 정보를 식별하는 것을 특징으로 하는 불법 복제된 온라인 만화 식별 시스템.The determination unit aligns the plurality of pieces of reference feature points that match the same content information according to the order of the sequence information, and generates overall feature point information that combines adjacent reference feature point information with each other, and converts the normalized feature point information into the whole feature points. And illegally copied on-line comics identification system that scans the information in a sliding manner to identify reference feature information corresponding to the normalized feature information.
  5. 청구항 1에 있어서,The method according to claim 1,
    상기 정규화부는 상기 식별 대상 이미지의 크기를 상기 정규화 크기에 따른 미리 설정된 사이즈의 가로 기준으로 조절하는 것을 특징으로 하는 불법 복제된 온라인 만화 식별 시스템.The normalization unit illegally copied online comics identification system, characterized in that for adjusting the size of the image to be identified based on the horizontal basis of the preset size according to the normalized size.
  6. 청구항 1에 있어서,The method according to claim 1,
    상기 정규화부는 상기 식별 대상 이미지의 크기를 상기 정규화 크기에 따른 미리 설정된 비율의 가로 기준으로 조절하는 것을 특징으로 하는 불법 복제된 온라인 만화 식별 시스템.The normalization unit illegally copied online comics identification system, characterized in that for adjusting the size of the image to be identified based on the horizontal ratio of a preset ratio according to the normalization size.
  7. 청구항 1에 있어서,The method according to claim 1,
    상기 정규화부는 상기 크기 조절에 따른 식별 대상 이미지의 크기 또는 결합된 복수의 식별 대상 이미지의 크기가 상기 정규화 크기를 초과하는 경우 상기 정규화 크기를 초과하는 영역을 분할하여 상기 정규화 크기에 대응되는 정규화 이미지를 생성하는 것을 특징으로 하는 불법 복제된 온라인 만화 식별 시스템.The normalization unit divides a region exceeding the normalized size by dividing a region that exceeds the normalized size when the size of the identification target image according to the size adjustment or the combined plurality of identification target images exceeds the normalized size. Pirated online cartoon identification system, characterized in that for generating.
  8. 청구항 1에 있어서,The method according to claim 1,
    상기 판단부는 상기 식별 대상 컨텐츠의 생성 일자와 상기 컨텐츠 정보에 포함된 생성일자를 비교하여 상기 식별 대상 컨텐츠의 생성 일자 이후에 생성된 컨텐츠 정보에 매칭된 기준 특징점 정보를 비교 대상에서 제외하는 것을 특징으로 하는 불법 복제된 온라인 만화 식별 시스템.The determination unit compares the creation date of the identification target content with the creation date included in the content information, and excludes reference feature point information matching the content information generated after the creation date of the identification target content from the comparison target. Pirated online cartoon identification system.
  9. 온라인 만화 컨텐츠를 복제한 불법 복제 컨텐츠를 식별하는 장치의 불법 복제된 온라인 만화 식별 방법에 있어서,In the illegally copied online cartoon identification method of the device for identifying the pirated content that copied the online cartoon content,
    상기 온라인 만화 컨텐츠를 구성하는 회차별 원본 이미지에 대한 특징점을 추출하여 기준 특징점 정보를 생성하고, 상기 기준 특징점 정보에 해당되는 회차정보 및 컨텐츠 정보와 상호 매칭하여 DB에 저장하는 단계;Extracting feature points of the original image for each episode constituting the online cartoon content, generating reference feature point information, and matching the sequence information and content information corresponding to the reference feature point information with each other and storing them in a DB;
    식별 대상 컨텐츠를 수신하고, 상기 식별 대상 컨텐츠를 구성하는 하나 이상의 식별 대상 이미지를 추출하는 단계;Receiving identification content and extracting at least one identification image constituting the identification content;
    상기 각 식별 대상 이미지에 지정된 파일명에 따라 식별 대상 이미지의 순서를 식별하고, 미리 설정된 정규화 크기에 따라 하나의 상기 식별 대상 이미지 또는 상기 순서를 기초로 연속되는 복수의 식별 대상 이미지를 대상으로 크기 조절, 결합 및 분할 중 적어도 하나를 통해 상기 정규화 크기를 가진 이미지로 정규화한 정규화 이미지를 생성하는 단계; 및Identifying the order of the identification target image according to a file name assigned to each identification target image, and adjusting the size of one identification image or a plurality of consecutive identification target images based on the sequence according to a preset normalized size; Generating a normalized image normalized to the image having the normalized size through at least one of combining and dividing; And
    상기 정규화 이미지로부터 특징점을 추출하여 정규화 특징점 정보를 생성하고, 상기 DB에 저장된 기준 특징점 정보와 비교하여 일치하는 기준 특징점 정보에 매칭된 컨텐츠 정보를 추출하여, 상기 식별 대상 컨텐츠를 상기 컨텐츠 정보에 대응되는 불법 복제 컨텐츠로 판단하는 단계The feature point is extracted from the normalized image to generate normalized feature point information, and compared with reference feature point information stored in the DB to extract content information matched with the matched reference feature point information, wherein the identification target content corresponds to the content information. Determining illegal copy content
    를 포함하는 불법 복제된 온라인 만화 식별 방법.Pirated online comics identification method comprising a.
  10. 청구항 9에 있어서,The method according to claim 9,
    상기 판단하는 단계는 상기 정규화 특징점 정보와 일치하는 기준 특징점 정보에 매칭되어 상기 DB에 저장된 회차정보를 상기 컨텐츠 정보와 함께 제공하는 것을 특징으로 하는 불법 복제된 온라인 만화 식별 방법.The determining may include illegally copied online comic book identification method comprising matching the reference feature information corresponding to the normalized feature point information and the turn information stored in the DB together with the content information.
PCT/KR2016/014063 2015-12-21 2016-12-01 System and method for identifying illegally copied online comics WO2017111340A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2015-0182717 2015-12-21
KR1020150182717A KR101744614B1 (en) 2015-12-21 2015-12-21 System and method for identifying illegal copy of online comics

Publications (1)

Publication Number Publication Date
WO2017111340A1 true WO2017111340A1 (en) 2017-06-29

Family

ID=59089589

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/014063 WO2017111340A1 (en) 2015-12-21 2016-12-01 System and method for identifying illegally copied online comics

Country Status (2)

Country Link
KR (1) KR101744614B1 (en)
WO (1) WO2017111340A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109005425A (en) * 2018-08-26 2018-12-14 俞绍富 Network video monitor and control system

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11748756B2 (en) 2017-05-12 2023-09-05 Samsung Electronics Co., Ltd. System and method for fraud detection
KR101998593B1 (en) * 2017-11-27 2019-07-10 주식회사 디알엠인사이드 System and method for identifying online comics based on region of interest
KR102112768B1 (en) * 2018-08-06 2020-06-04 네이버웹툰 주식회사 Method, apparatus and computer program for detecting marker using image matching
KR102113756B1 (en) * 2018-12-20 2020-05-21 주식회사 디알엠인사이드 System and method for identifying online comics based on region of interest

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100823729B1 (en) * 2007-06-25 2008-04-21 주식회사 엔츠 Method for preventing image from spreading through network using image identification information and system therefor
KR20130062582A (en) * 2011-12-05 2013-06-13 한국전자통신연구원 System and method for finger printing for comics
KR20140073834A (en) * 2012-12-07 2014-06-17 주식회사 케이티 Apparatus for recognizing contents and method thereof
KR101492486B1 (en) * 2014-03-12 2015-02-11 주식회사 디알엠인사이드 Identification system and method for scaned comics insensitive to composition method
KR20150081864A (en) * 2014-01-07 2015-07-15 주식회사 디알엠인사이드 Identification system and method for scaned comics

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100823729B1 (en) * 2007-06-25 2008-04-21 주식회사 엔츠 Method for preventing image from spreading through network using image identification information and system therefor
KR20130062582A (en) * 2011-12-05 2013-06-13 한국전자통신연구원 System and method for finger printing for comics
KR20140073834A (en) * 2012-12-07 2014-06-17 주식회사 케이티 Apparatus for recognizing contents and method thereof
KR20150081864A (en) * 2014-01-07 2015-07-15 주식회사 디알엠인사이드 Identification system and method for scaned comics
KR101492486B1 (en) * 2014-03-12 2015-02-11 주식회사 디알엠인사이드 Identification system and method for scaned comics insensitive to composition method

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109005425A (en) * 2018-08-26 2018-12-14 俞绍富 Network video monitor and control system

Also Published As

Publication number Publication date
KR101744614B1 (en) 2017-06-09

Similar Documents

Publication Publication Date Title
WO2017111340A1 (en) System and method for identifying illegally copied online comics
CN105118048B (en) The recognition methods of reproduction certificate picture and device
WO2010011026A2 (en) Search system using image
WO2019103221A1 (en) System and method for identifying online cartoon on basis of region of interest
CN104205865A (en) Method and apparatus for authenticating video content
WO2020085690A1 (en) Blockchain-based copyright management system for non-digital works
WO2012108623A1 (en) Method, system and computer-readable recording medium for adding a new image and information on the new image to an image database
WO2014194620A1 (en) Method, module, apparatus and system for extracting, training and detecting image characteristic
WO2015129983A1 (en) Device and method for recommending movie on basis of distributed mining of fuzzy association rules
WO2017014391A1 (en) Method of confirming authenticity of object by using identification code image, and device for carrying out same
KR101803066B1 (en) Integrated identification system and method for illegal copy of book
WO2020138607A1 (en) Method and device for providing question and answer using chatbot
WO2019156543A2 (en) Method for determining representative image of video, and electronic device for processing method
WO2015122620A1 (en) Digital content monitoring system for ensuring integrity of digital content
WO2021172668A1 (en) First copyright holder authentication system using blockchain, and method therefor
WO2013129729A1 (en) System for searching augmented reality image in real-time by using layout descriptor and image feature point
WO2015034176A1 (en) Integrated document management system
WO2017164510A2 (en) Voice data-based multimedia content tagging method, and system using same
WO2021091124A1 (en) Electronic device and operation method capable of searching for file similar to reference file on basis of distribution information about features of each of plurality of files
WO2019083159A1 (en) Content distribution method using copyright protection, and system therefor
WO2016163568A1 (en) Stl file including text information, and stl file searching and managing system using same
CN101373483B (en) Data processing device and data processing method
KR102113756B1 (en) System and method for identifying online comics based on region of interest
WO2023136448A1 (en) Research note utilization system using blockchain technology, and execution method therefor
WO2019225799A1 (en) Method and device for deleting user information using deep learning generative model

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16879207

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16879207

Country of ref document: EP

Kind code of ref document: A1