KR102566921B1 - Electronic terminal apparatus which inserts source information of the image inserted into an electronic document, and the operating method thereof - Google Patents

Electronic terminal apparatus which inserts source information of the image inserted into an electronic document, and the operating method thereof Download PDF

Info

Publication number
KR102566921B1
KR102566921B1 KR1020210066705A KR20210066705A KR102566921B1 KR 102566921 B1 KR102566921 B1 KR 102566921B1 KR 1020210066705 A KR1020210066705 A KR 1020210066705A KR 20210066705 A KR20210066705 A KR 20210066705A KR 102566921 B1 KR102566921 B1 KR 102566921B1
Authority
KR
South Korea
Prior art keywords
source information
image
information
words
electronic document
Prior art date
Application number
KR1020210066705A
Other languages
Korean (ko)
Other versions
KR20220158990A (en
Inventor
추재경
조선영
Original Assignee
주식회사 한글과컴퓨터
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 한글과컴퓨터 filed Critical 주식회사 한글과컴퓨터
Priority to KR1020210066705A priority Critical patent/KR102566921B1/en
Publication of KR20220158990A publication Critical patent/KR20220158990A/en
Application granted granted Critical
Publication of KR102566921B1 publication Critical patent/KR102566921B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/955—Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • G06F16/9558—Details of hyperlinks; Management of linked annotations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33—Querying
    • G06F16/3331—Query processing
    • G06F16/334—Query execution
    • G06F16/3347—Query execution using vector based model
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5846—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using extracted text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/103—Formatting, i.e. changing of presentation of documents
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/279—Recognition of textual entities
    • G06F40/289—Phrasal analysis, e.g. finite state techniques or chunking
    • G06F40/295—Named entity recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/148—Segmentation of character regions
    • G06V30/153—Segmentation of character regions using recognition of characters or words

Abstract

전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치 및 그 동작 방법이 개시된다. 본 발명은 사용자에 의해, 전자 문서에, 텍스트가 포함되어 있는 제1 이미지가 삽입되면, 사전 설정된 텍스트 인식 모델을 기초로, 상기 제1 이미지에 포함되어 있는 텍스트를 추출한 후, 사전 저장되어 있는 개체명 단어들과 주제어들 간의 연관도 점수를 기초로, 상기 제1 이미지에 대한 대표 주제어를 선정하고, 출처 정보 데이터베이스 서버로부터 상기 제1 이미지에 대한 대표 주제어가 포함된 적어도 하나의 출처 정보를 수신한 후, 상기 적어도 하나의 출처 정보 중 어느 하나의 출처 정보를 상기 제1 이미지에 대한 출처 정보로 선택하여 상기 전자 문서에 삽입하는 전자 단말 장치 및 그 동작 방법에 대한 것이다.Disclosed are an electronic terminal device that automatically inserts source information of an image inserted into an electronic document and an operating method thereof. According to the present invention, when a first image including text is inserted into an electronic document by a user, the text included in the first image is extracted based on a preset text recognition model, and then a previously stored object is inserted. Selecting a representative subject word for the first image based on an association score between name words and subject words, and receiving at least one source information including the representative subject word for the first image from a source information database server. Then, an electronic terminal device and an operating method of the electronic terminal device select any one of the at least one piece of source information as the source information for the first image and insert it into the electronic document.

Description

전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치 및 동작 방법{ELECTRONIC TERMINAL APPARATUS WHICH INSERTS SOURCE INFORMATION OF THE IMAGE INSERTED INTO AN ELECTRONIC DOCUMENT, AND THE OPERATING METHOD THEREOF}Electronic terminal device and operation method for automatically inserting source information of an image inserted into an electronic document

본 발명은 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치 및 동작 방법에 대한 것이다.The present invention relates to an electronic terminal device and operation method for automatically inserting source information of an image inserted into an electronic document.

최근, 컴퓨터나 스마트폰 또는 태블릿 PC 등이 널리 보급됨에 따라, 이러한 전자 단말 장치를 이용하여 전자 문서를 열람, 작성, 편집할 수 있도록 하는 다양한 종류의 전자 문서 관련 프로그램들이 출시되고 있다. Recently, as computers, smart phones, tablet PCs, etc. are widely spread, various types of electronic document-related programs that enable reading, writing, and editing of electronic documents using such electronic terminal devices have been released.

이러한 전자 문서 관련 프로그램들로는 기본적인 문서의 작성, 편집 등을 지원하는 워드프로세서, 데이터의 입력, 산술연산, 데이터 관리를 보조하는 스프레드시트, 발표자의 발표를 보조하기 위한 프레젠테이션 프로그램 등이 있다. Such electronic document-related programs include word processors supporting basic document preparation and editing, data input, arithmetic operations, and data management assisting spreadsheets, presentation programs assisting presenters in presentations, and the like.

관련해서, 이러한 전자 문서 관련 프로그램들을 활용하여 전자 문서를 작성하는 사용자는, 전자 문서 관련 프로그램들에서 지원하는 이미지 삽입 기능을 활용하여 전자 문서에 이미지를 삽입하는 경우가 많다.In this regard, a user who creates an electronic document using these electronic document-related programs often inserts an image into the electronic document by using an image insertion function supported by the electronic document-related programs.

한편, 최근에는, 이미지의 도용이나 표절 등과 같은 사회적인 문제가 대두됨에 따라, 전자 문서에 삽입된 이미지의 출처 정보에 대한 표기의 필요성이 강화되고 있다. On the other hand, recently, as social problems such as image theft or plagiarism have emerged, the need to mark source information of images inserted in electronic documents has been strengthened.

하지만, 기존의 전자 문서 관련 프로그램들에서는 삽입된 이미지에 대한 출처 정보를 자동으로 삽입하는 기능을 지원하지 않기 때문에, 사용자가 전자 문서에 삽입된 이미지의 출처 정보를 작성하기 위해서는, 별도로 주석 기능 또는 인용 기능을 활용하여 전자 문서에 삽입된 이미지에 대한 출처 정보를 일일이 작성해야 하는 번거로움이 있었다.However, since existing electronic document-related programs do not support the function of automatically inserting source information for inserted images, in order for a user to create source information for images inserted in electronic documents, a separate annotation function or quotation is required. There was a hassle of having to manually create source information for images inserted into electronic documents using the function.

만약, 전자 문서에 삽입된 이미지의 출처 정보를 사용자가 일일이 작성하지 않아도, 이미지의 출처 정보를 자동으로 전자 문서에 삽입할 수 있는 기술이 도입된다면, 전자 문서 관련 프로그램을 활용하여 전자 문서를 작성하는 사용자의 편의성이 증대될 수 있을 것이다.If a technology is introduced to automatically insert source information of images into an electronic document without the user having to manually create the source information of images inserted into the electronic document, it is possible to create an electronic document using an electronic document-related program. User convenience can be increased.

따라서, 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 기술에 대한 연구가 필요하다.Therefore, research on technology for automatically inserting source information of images inserted into electronic documents is required.

본 발명은 사용자에 의해, 전자 문서에, 텍스트가 포함되어 있는 제1 이미지가 삽입되면, 사전 설정된 텍스트 인식 모델을 기초로, 상기 제1 이미지에 포함되어 있는 텍스트를 추출한 후, 사전 저장되어 있는 개체명 단어들과 주제어들 간의 연관도 점수를 기초로, 상기 제1 이미지에 대한 대표 주제어를 선정하고, 출처 정보 데이터베이스 서버로부터 상기 제1 이미지에 대한 대표 주제어가 포함된 적어도 하나의 출처 정보를 수신한 후, 상기 적어도 하나의 출처 정보 중 어느 하나의 출처 정보를 상기 제1 이미지에 대한 출처 정보로 선택하여 상기 전자 문서에 삽입하는 전자 단말 장치 및 그 동작 방법을 제시함으로써, 사용자가 보다 효율적으로 전자 문서에 삽입된 이미지의 출처 정보를 삽입할 수 있도록 지원하고자 한다. According to the present invention, when a first image including text is inserted into an electronic document by a user, the text included in the first image is extracted based on a preset text recognition model, and then a previously stored object is inserted. Selecting a representative subject word for the first image based on an association score between name words and subject words, and receiving at least one source information including the representative subject word for the first image from a source information database server. Then, by presenting an electronic terminal device and its operation method for selecting any one source information of the at least one source information as the source information for the first image and inserting it into the electronic document, the user can more efficiently use the electronic document. We want to support the insertion of source information of images inserted into .

본 발명의 일실시예에 따른 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치는 사전 설정된 복수의 개체명 단어들이 저장되어 있는 개체명 단어 저장부, 사전 설정된 복수의 주제어들과, 각 주제어별로 사전 지정된 상기 복수의 개체명 단어들 각각과의 연관도 점수 - 상기 연관도 점수가 높을수록 주제어와 개체명 단어 간의 연관도가 높음을 의미함 - 가 대응되어 저장되어 있는 연관도 점수 저장부, 사용자에 의해, 전자 문서에, 텍스트가 포함되어 있는 제1 이미지가 삽입되면, 사전 설정된 텍스트 인식 모델을 기초로, 상기 제1 이미지에 대한 텍스트 인식을 수행하여 상기 제1 이미지에 포함되어 있는 텍스트를 추출하는 텍스트 추출부, 상기 제1 이미지에 포함되어 있는 텍스트가 추출되면, 상기 추출된 텍스트에서 상기 복수의 개체명 단어들이 등장하는지 여부를 확인하여, 상기 추출된 텍스트에서 상기 복수의 개체명 단어들 중 k(k는 자연수임)개의 개체명 단어가 등장하는 것으로 확인되면, 상기 추출된 텍스트로부터 상기 k개의 개체명 단어를 선택하는 개체명 단어 선택부, 상기 추출된 텍스트로부터 상기 k개의 개체명 단어가 선택되면, 상기 연관도 점수 저장부에 저장되어 있는, 상기 복수의 주제어들 각각에 대응되는 상기 k개의 개체명 단어 각각과의 연관도 점수를 기초로, 상기 복수의 주제어들 중 어느 하나의 주제어를 상기 제1 이미지에 대한 대표 주제어로 선정하는 대표 주제어 선정부, 상기 제1 이미지에 대한 대표 주제어가 선정되면, 출처 정보 데이터베이스 서버 - 상기 출처 정보 데이터베이스 서버에는 사전 수집된 복수의 출처 정보들과, 각 출처 정보에 대응되는 연관 키워드들이 서로 대응되어 저장되어 있음 - 에 접속하여, 상기 출처 정보 데이터베이스 서버로, 상기 제1 이미지에 대한 대표 주제어를 전송하면서, 상기 복수의 출처 정보들 중 연관 키워드들 내에 상기 제1 이미지에 대한 대표 주제어가 포함되어 있는 출처 정보를 검색하여 전송할 것을 지시하는 출처 정보 검색 명령을 전송하는 명령 전송부, 상기 출처 정보 데이터베이스 서버에 의해, 상기 복수의 출처 정보들 중 연관 키워드들 내에 상기 제1 이미지에 대한 대표 주제어가 포함된 출처 정보로, 적어도 하나의 출처 정보가 검색됨에 따라, 상기 출처 정보 데이터베이스 서버로부터, 상기 적어도 하나의 출처 정보가 검색되었음을 지시하는 출처 정보 검색 결과가 수신되면, 상기 출처 정보 데이터베이스 서버로, 상기 적어도 하나의 출처 정보와 상기 적어도 하나의 출처 정보 각각에 대응되는 연관 키워드들에 대한 정보의 전송을 요청하는 전송 요청부, 상기 정보 전송 요청에 대응하여, 상기 출처 정보 데이터베이스 서버로부터, 상기 적어도 하나의 출처 정보와 상기 적어도 하나의 출처 정보 각각에 대응되는 연관 키워드들에 대한 정보가 수신되면, 상기 적어도 하나의 출처 정보 각각에 대해, 각 출처 정보에 대응되는 연관 키워드들에 상기 k개의 개체명 단어 중 몇 개의 개체명 단어가 포함되어 있는지 확인하여, 상기 적어도 하나의 출처 정보 중 연관 키워드들 내에 상기 k개의 개체명 단어가 가장 많이 포함되어 있는 제1 출처 정보를, 상기 제1 이미지에 대한 출처 정보로 선택하는 출처 정보 선택부 및 상기 제1 출처 정보가 상기 제1 이미지에 대한 출처 정보로 선택되면, 상기 제1 출처 정보를 상기 전자 문서에 삽입하는 출처 정보 삽입부를 포함한다. An electronic terminal device for automatically inserting source information of an image inserted into an electronic document according to an embodiment of the present invention includes an entity name word storage unit in which a plurality of preset entity name words are stored, a plurality of preset keywords and , Relevance scores with each of the plurality of entity words pre-specified for each subject word - the higher the relevance score, the higher the association between the subject word and the entity word - associated with and stored relevance scores When a first image containing text is inserted into an electronic document by a storage unit and a user, text recognition is performed on the first image based on a preset text recognition model to be included in the first image. A text extracting unit extracting the text contained in the first image, when the text included in the first image is extracted, by checking whether the plurality of entity name words appear in the extracted text, the plurality of entities in the extracted text. If it is confirmed that k (k is a natural number) entity name words appear among the name words, an entity word selection unit for selecting the k entity name words from the extracted text, and the k entity name words from the extracted text. When a word of entity is selected, one of the plurality of subject words is determined based on an association score with each of the k number of subject words corresponding to each of the plurality of subject words stored in the relevance score storage unit. A representative subject word selection unit for selecting one subject word as a representative subject word for the first image, and when the representative subject word for the first image is selected, a source information database server - a plurality of pre-collected source information in the source information database server and related keywords corresponding to each source information are stored corresponding to each other, and while transmitting a representative keyword for the first image to the source information database server, the association among the plurality of source information A command transmission unit for transmitting a source information search command instructing to search for and transmit source information including a representative subject word for the first image in keywords, by the source information database server, among the plurality of source information Search for source information indicating that at least one source information has been retrieved from the source information database server as at least one source information is searched for source information including a representative subject word for the first image in related keywords. When a result is received, a transmission requesting unit requesting transmission of the at least one source information and information on related keywords corresponding to each of the at least one source information to the source information database server, and responding to the information transmission request Therefore, when information on the at least one source information and related keywords corresponding to each of the at least one source information is received from the source information database server, for each of the at least one source information, for each source information It is determined how many of the k entity name words among the k entity name words are included in the corresponding related keywords, and the k entity name words are included the most in the related keywords among the at least one source information. A source information selector for selecting source information as the source information for the first image, and inserting the first source information into the electronic document when the first source information is selected as the source information for the first image. Include a source information insert.

또한, 본 발명의 일실시예에 따른 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치의 동작 방법은 사전 설정된 복수의 개체명 단어들이 저장되어 있는 개체명 단어 저장부를 유지하는 단계, 사전 설정된 복수의 주제어들과, 각 주제어별로 사전 지정된 상기 복수의 개체명 단어들 각각과의 연관도 점수 - 상기 연관도 점수가 높을수록 주제어와 개체명 단어 간의 연관도가 높음을 의미함 - 가 대응되어 저장되어 있는 연관도 점수 저장부를 유지하는 단계, 사용자에 의해, 전자 문서에, 텍스트가 포함되어 있는 제1 이미지가 삽입되면, 사전 설정된 텍스트 인식 모델을 기초로, 상기 제1 이미지에 대한 텍스트 인식을 수행하여 상기 제1 이미지에 포함되어 있는 텍스트를 추출하는 단계, 상기 제1 이미지에 포함되어 있는 텍스트가 추출되면, 상기 추출된 텍스트에서 상기 복수의 개체명 단어들이 등장하는지 여부를 확인하여, 상기 추출된 텍스트에서 상기 복수의 개체명 단어들 중 k(k는 자연수임)개의 개체명 단어가 등장하는 것으로 확인되면, 상기 추출된 텍스트로부터 상기 k개의 개체명 단어를 선택하는 단계, 상기 추출된 텍스트로부터 상기 k개의 개체명 단어가 선택되면, 상기 연관도 점수 저장부에 저장되어 있는, 상기 복수의 주제어들 각각에 대응되는 상기 k개의 개체명 단어 각각과의 연관도 점수를 기초로, 상기 복수의 주제어들 중 어느 하나의 주제어를 상기 제1 이미지에 대한 대표 주제어로 선정하는 단계, 상기 제1 이미지에 대한 대표 주제어가 선정되면, 출처 정보 데이터베이스 서버 - 상기 출처 정보 데이터베이스 서버에는 사전 수집된 복수의 출처 정보들과, 각 출처 정보에 대응되는 연관 키워드들이 서로 대응되어 저장되어 있음 - 에 접속하여, 상기 출처 정보 데이터베이스 서버로, 상기 제1 이미지에 대한 대표 주제어를 전송하면서, 상기 복수의 출처 정보들 중 연관 키워드들 내에 상기 제1 이미지에 대한 대표 주제어가 포함되어 있는 출처 정보를 검색하여 전송할 것을 지시하는 출처 정보 검색 명령을 전송하는 단계, 상기 출처 정보 데이터베이스 서버에 의해, 상기 복수의 출처 정보들 중 연관 키워드들 내에 상기 제1 이미지에 대한 대표 주제어가 포함된 출처 정보로, 적어도 하나의 출처 정보가 검색됨에 따라, 상기 출처 정보 데이터베이스 서버로부터, 상기 적어도 하나의 출처 정보가 검색되었음을 지시하는 출처 정보 검색 결과가 수신되면, 상기 출처 정보 데이터베이스 서버로, 상기 적어도 하나의 출처 정보와 상기 적어도 하나의 출처 정보 각각에 대응되는 연관 키워드들에 대한 정보의 전송을 요청하는 단계, 상기 정보 전송 요청에 대응하여, 상기 출처 정보 데이터베이스 서버로부터, 상기 적어도 하나의 출처 정보와 상기 적어도 하나의 출처 정보 각각에 대응되는 연관 키워드들에 대한 정보가 수신되면, 상기 적어도 하나의 출처 정보 각각에 대해, 각 출처 정보에 대응되는 연관 키워드들에 상기 k개의 개체명 단어 중 몇 개의 개체명 단어가 포함되어 있는지 확인하여, 상기 적어도 하나의 출처 정보 중 연관 키워드들 내에 상기 k개의 개체명 단어가 가장 많이 포함되어 있는 제1 출처 정보를, 상기 제1 이미지에 대한 출처 정보로 선택하는 단계 및 상기 제1 출처 정보가 상기 제1 이미지에 대한 출처 정보로 선택되면, 상기 제1 출처 정보를 상기 전자 문서에 삽입하는 단계를 포함한다.In addition, a method of operating an electronic terminal device for automatically inserting source information of an image inserted into an electronic document according to an embodiment of the present invention includes the steps of maintaining a named entity word storage unit in which a plurality of preset entity name words are stored. , Relevance scores between a plurality of pre-set subject words and each of the plurality of entity words pre-specified for each subject word - the higher the relevance score, the higher the association between the subject word and the entity word - is Maintaining a correspondingly stored relevance score storage unit, when a first image including text is inserted into an electronic document by a user, the text for the first image is determined based on a preset text recognition model. extracting text included in the first image by performing recognition; when the text included in the first image is extracted, checking whether the plurality of object name words appear in the extracted text; When it is confirmed that k (k is a natural number) number of entity words among the plurality of entities words appear in the extracted text, selecting the k entity name words from the extracted text; When the k entity name words are selected from the text, based on the relevance score with each of the k entity name words corresponding to each of the plurality of subject words stored in the relevance score storage unit, the plurality of entity name words are selected. Selecting any one of the subject words as a representative subject word for the first image, if the representative subject word for the first image is selected, a source information database server - the source information database server includes a plurality of pre-collected Source information and related keywords corresponding to each source information are stored in correspondence with each other, and while transmitting a representative keyword for the first image to the source information database server, the plurality of source information transmitting, by the source information database server, a source information search command instructing to search for and transmit source information including a representative keyword for the first image among related keywords; among the plurality of pieces of source information; Search for source information indicating that at least one source information has been retrieved from the source information database server as at least one source information is searched for source information including a representative subject word for the first image in related keywords. When a result is received, requesting transmission of the at least one source information and information on related keywords corresponding to each of the at least one source information to the source information database server, in response to the information transmission request, When information on the at least one source information and related keywords corresponding to each of the at least one source information is received from the source information database server, for each of the at least one source information, First source information in which the k number of entity words are included the most in the related keywords among the at least one source information by determining how many entity name words among the k entity name words are included in the related keywords. and, if the first source information is selected as the source information for the first image, inserting the first source information into the electronic document.

본 발명은 사용자에 의해, 전자 문서에, 텍스트가 포함되어 있는 제1 이미지가 삽입되면, 사전 설정된 텍스트 인식 모델을 기초로, 상기 제1 이미지에 포함되어 있는 텍스트를 추출한 후, 사전 저장되어 있는 개체명 단어들과 주제어들 간의 연관도 점수를 기초로, 상기 제1 이미지에 대한 대표 주제어를 선정하고, 출처 정보 데이터베이스 서버로부터 상기 제1 이미지에 대한 대표 주제어가 포함된 적어도 하나의 출처 정보를 수신한 후, 상기 적어도 하나의 출처 정보 중 어느 하나의 출처 정보를 상기 제1 이미지에 대한 출처 정보로 선택하여 상기 전자 문서에 삽입하는 전자 단말 장치 및 그 동작 방법을 제시함으로써, 사용자가 보다 효율적으로 전자 문서에 삽입된 이미지의 출처 정보를 삽입할 수 있도록 지원할 수 있다.According to the present invention, when a first image including text is inserted into an electronic document by a user, the text included in the first image is extracted based on a preset text recognition model, and then a previously stored object is inserted. Selecting a representative subject word for the first image based on an association score between name words and subject words, and receiving at least one source information including the representative subject word for the first image from a source information database server. Then, by presenting an electronic terminal device and its operation method for selecting any one source information of the at least one source information as the source information for the first image and inserting it into the electronic document, the user can more efficiently use the electronic document. It is possible to support insertion of source information of images inserted into .

도 1은 본 발명의 일실시예에 따른 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치의 구조를 도시한 도면이다.
도 2 내지 도 4는 본 발명의 일실시예에 따른 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치의 동작을 설명하기 위한 도면이다.
도 5는 본 발명의 일실시예에 따른 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치의 동작 방법을 도시한 순서도이다.1 is a diagram showing the structure of an electronic terminal device that automatically inserts source information of an image inserted into an electronic document according to an embodiment of the present invention.
2 to 4 are views for explaining an operation of an electronic terminal device that automatically inserts source information of an image inserted into an electronic document according to an embodiment of the present invention.
5 is a flowchart illustrating an operating method of an electronic terminal device for automatically inserting source information of an image inserted into an electronic document according to an embodiment of the present invention.

이하에서는 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명하기로 한다. 이러한 설명은 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였으며, 다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 본 명세서 상에서 사용되는 모든 용어들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 사람에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다.Hereinafter, embodiments according to the present invention will be described in detail with reference to the accompanying drawings. This description is not intended to limit the present invention to specific embodiments, but should be understood to include all modifications, equivalents, and substitutes included in the spirit and scope of the present invention. While describing each drawing, similar reference numerals have been used for similar components, and unless otherwise defined, all terms used in this specification, including technical or scientific terms, are common knowledge in the art to which the present invention belongs. has the same meaning as commonly understood by the person who has it.

본 문서에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다. 또한, 본 발명의 다양한 실시예들에 있어서, 각 구성요소들, 기능 블록들 또는 수단들은 하나 또는 그 이상의 하부 구성요소로 구성될 수 있고, 각 구성요소들이 수행하는 전기, 전자, 기계적 기능들은 전자회로, 집적회로, ASIC(Application Specific Integrated Circuit) 등 공지된 다양한 소자들 또는 기계적 요소들로 구현될 수 있으며, 각각 별개로 구현되거나 2 이상이 하나로 통합되어 구현될 수도 있다. In this document, when a certain component is said to "include", it means that it may further include other components without excluding other components unless otherwise stated. In addition, in various embodiments of the present invention, each component, functional block, or means may be composed of one or more sub-components, and the electrical, electronic, and mechanical functions performed by each component are electronic It may be implemented with various known elements or mechanical elements such as circuits, integrated circuits, ASICs (Application Specific Integrated Circuits), and may be implemented separately or two or more may be integrated into one.

한편, 첨부된 블록도의 블록들이나 흐름도의 단계들은 범용 컴퓨터, 특수용 컴퓨터, 휴대용 노트북 컴퓨터, 네트워크 컴퓨터 등 데이터 프로세싱이 가능한 장비의 프로세서나 메모리에 탑재되어 지정된 기능들을 수행하는 컴퓨터 프로그램 명령들(instructions)을 의미하는 것으로 해석될 수 있다. 이들 컴퓨터 프로그램 명령들은 컴퓨터 장치에 구비된 메모리 또는 컴퓨터에서 판독 가능한 메모리에 저장될 수 있기 때문에, 블록도의 블록들 또는 흐름도의 단계들에서 설명된 기능들은 이를 수행하는 명령 수단을 내포하는 제조물로 생산될 수도 있다. 아울러, 각 블록 또는 각 단계는 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 명령들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 가능한 실시예들에서는 블록들 또는 단계들에서 언급된 기능들이 정해진 순서와 달리 실행되는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들 또는 단계들은 실질적으로 동시에 수행되거나, 역순으로 수행될 수 있으며, 경우에 따라 일부 블록들 또는 단계들이 생략된 채로 수행될 수도 있다.On the other hand, the blocks of the accompanying block diagram or the steps of the flowchart are computer program instructions that perform designated functions by being loaded into a processor or memory of a device capable of data processing, such as a general-purpose computer, a special purpose computer, a portable notebook computer, and a network computer. can be interpreted as meaning Since these computer program instructions may be stored in a memory included in a computer device or in a computer readable memory, the functions described in blocks of a block diagram or steps of a flowchart are produced as a product containing instruction means for performing them. It could be. Further, each block or each step may represent a module, segment or portion of code that includes one or more executable instructions for executing specified logical function(s). Also, it should be noted that in some alternative embodiments, functions mentioned in blocks or steps may be executed out of a predetermined order. For example, two blocks or steps shown in succession may be performed substantially simultaneously or in reverse order, and in some cases, some blocks or steps may be omitted.

도 1은 본 발명의 일실시예에 따른 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치의 구조를 도시한 도면이다. 1 is a diagram showing the structure of an electronic terminal device that automatically inserts source information of an image inserted into an electronic document according to an embodiment of the present invention.

도 1을 참조하면, 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치(110)는 개체명 단어 저장부(111), 연관도 점수 저장부(112), 텍스트 추출부(113), 개체명 단어 선택부(114), 대표 주제어 선정부(115), 명령 전송부(116), 전송 요청부(117), 출처 정보 선택부(118) 및 출처 정보 삽입부(119)를 포함한다. Referring to FIG. 1 , an electronic terminal device 110 that automatically inserts source information of an image inserted into an electronic document includes an object name word storage unit 111, a relevance score storage unit 112, and a text extraction unit 113. ), object name word selection unit 114, representative subject word selection unit 115, command transmission unit 116, transmission request unit 117, source information selection unit 118 and source information insertion unit 119 do.

개체명 단어 저장부(111)에는 사전 설정된 복수의 개체명 단어들이 저장되어 있다. The entity name word storage unit 111 stores a plurality of preset entity name words.

예컨대, 사전 설정된 복수의 개체명 단어들을 '개체명 1, 개체명 2, 개체명 3, 개체명 4, 개체명 5'라고 하는 경우, 개체명 단어 저장부(111)에는 '개체명 1, 개체명 2, 개체명 3, 개체명 4, 개체명 5'가 저장되어 있을 수 있다. For example, when a plurality of preset entity name words are 'entity name 1, entity name 2, entity name 3, entity name 4, and entity name 5', the entity name word storage unit 111 contains 'entity name 1, entity name Name 2, entity name 3, entity name 4, and entity name 5' may be stored.

연관도 점수 저장부(112)에는 사전 설정된 복수의 주제어들과, 각 주제어별로 사전 지정된 상기 복수의 개체명 단어들 각각과의 연관도 점수가 대응되어 저장되어 있다. In the relevance score storage unit 112, a plurality of pre-set subject words and relevance scores of each of the plurality of entity name words pre-specified for each subject word are stored in correspondence with each other.

여기서, 상기 연관도 점수가 높을수록 주제어와 개체명 단어 간의 연관도가 높음을 의미한다.Here, the higher the association score, the higher the association between the subject word and the entity word.

예컨대, 상기 복수의 주제어들을 '주제어 1, 주제어 2, 주제어 3, 주제어 4'라고 하는 경우, 연관도 점수 저장부(112)에는 '주제어 1, 주제어 2, 주제어 3, 주제어 4'와, 각 주제어별로 사전 지정된 상기 복수의 개체명 단어들 각각과의 연관도 점수가 대응되어 저장되어 있을 수 있다. For example, when the plurality of keywords are referred to as 'key word 1, key word 2, key word 3, and key word 4', the relevance score storage unit 112 includes 'key word 1, key word 2, key word 3, and key word 4', respectively. Relevance scores with each of the plurality of entity name words pre-specified for each may be stored in correspondence with each other.

관련해서, 연관도 점수 저장부(112)에는 하기의 표 1과 같이, '주제어 1, 주제어 2, 주제어 3, 주제어 4'와, 각 주제어별로 사전 지정된 상기 복수의 개체명 단어들 각각과의 연관도 점수가 대응되어 저장되어 있을 수 있다. In this regard, as shown in Table 1 below, the relevance score storage unit 112 includes 'key word 1, subject word 2, subject word 3, and subject word 4' and associations with each of the plurality of entity names pre-specified for each subject word. Scores may be stored in correspondence with each other.

복수의 주제어들multiple subject words 복수의 개체명 단어들 각각과의 연관도 점수 (점)Association score (points) with each of the plurality of entity names 개체명 1entity name 1 개체명 2entity name 2 개체명 3entity name 3 개체명 4entity name 4 개체명 5entity name 5 주제어 1Key word 1 9090 8080 6565 7070 8585 주제어 2Key word 2 8080 7575 9090 6060 8585 주제어 3Key word 3 9090 9595 7070 7575 8080 주제어 4Key word 4 7070 9090 8585 8080 75 75

텍스트 추출부(113)는 사용자(130)에 의해, 전자 문서에, 텍스트가 포함되어 있는 제1 이미지가 삽입되면, 사전 설정된 텍스트 인식 모델을 기초로, 상기 제1 이미지에 대한 텍스트 인식을 수행하여 상기 제1 이미지에 포함되어 있는 텍스트를 추출한다. When a first image containing text is inserted into an electronic document by the user 130, the text extractor 113 performs text recognition on the first image based on a preset text recognition model. Text included in the first image is extracted.

여기서, 상기 텍스트 인식 모델로는 OCR(Optical Character Recognition, 광학 문자 인식) 기술 등이 이용될 수 있다.Here, as the text recognition model, OCR (Optical Character Recognition) technology or the like may be used.

개체명 단어 선택부(114)는 텍스트 추출부(113)에 의해 상기 제1 이미지에 포함되어 있는 텍스트가 추출되면, 상기 추출된 텍스트에서 상기 복수의 개체명 단어들이 등장하는지 여부를 확인하여, 상기 추출된 텍스트에서 상기 복수의 개체명 단어들 중 k(k는 자연수임)개의 개체명 단어가 등장하는 것으로 확인되면, 상기 추출된 텍스트로부터 상기 k개의 개체명 단어를 선택한다. When the text included in the first image is extracted by the text extraction unit 113, the entity word selection unit 114 checks whether the plurality of entity name words appear in the extracted text, When it is confirmed that k (k is a natural number) number of entity names appearing among the plurality of entity names in the extracted text, the k entity name words are selected from the extracted text.

이하에서는, 텍스트 추출부(113) 및 개체명 단어 선택부(114)의 동작을 예를 들어, 상세히 설명하기로 한다. Hereinafter, operations of the text extraction unit 113 and the object name word selection unit 114 will be described in detail, for example.

먼저, 전술한 예와 같이, 상기 복수의 개체명 단어들을 '개체명 1, 개체명 2, 개체명 3, 개체명 4, 개체명 5'라고 하고, 도 2에 도시된 그림과 같이, 사용자(130)에 의해, 전자 문서(200)에, 텍스트가 포함되어 있는 '이미지 1(210)'이 삽입되었다고 가정하자. First, as in the above example, the plurality of entity name words are referred to as 'entity name 1, entity name 2, entity name 3, entity name 4, and entity name 5', and as shown in FIG. 2, the user ( Assume that 'Image 1 (210)' including text is inserted into the electronic document 200 by step 130.

그러면, 텍스트 추출부(113)는 사전 설정된 텍스트 인식 모델을 기초로, '이미지 1(210)'에 대한 텍스트 인식을 수행하여 '이미지 1(210)'에 포함되어 있는 텍스트를 추출할 수 있다. Then, the text extractor 113 may extract text included in the 'Image 1 210' by performing text recognition on the 'Image 1 210' based on a preset text recognition model.

그러고 나서, 개체명 단어 선택부(114)는 상기 추출된 텍스트에서 '개체명 1, 개체명 2, 개체명 3, 개체명 4, 개체명 5'가 등장하는지 여부를 확인할 수 있다. Then, the entity name word selector 114 may check whether 'entity name 1, entity name 2, entity name 3, entity name 4, and entity name 5' appear in the extracted text.

그 결과, 상기 추출된 텍스트에서 '개체명 1, 개체명 2, 개체명 3, 개체명 4, 개체명 5' 중 '3'개의 개체명 단어인 '개체명 1, 개체명 2, 개체명 5'가 등장하는 것으로 확인되었다고 하는 경우, 개체명 단어 선택부(114)는 상기 추출된 텍스트로부터 '개체명 1, 개체명 2, 개체명 5'를 선택할 수 있다. As a result, 'entity name 1, entity name 2, entity name 5', which is '3' entity name words among 'entity name 1, entity name 2, entity name 3, entity name 4, and entity name 5' in the extracted text ' appears, the entity name word selector 114 may select 'entity name 1, entity name 2, entity name 5' from the extracted text.

이렇게, 개체명 단어 선택부(114)에 의해 상기 추출된 텍스트로부터 상기 k개의 개체명 단어가 선택되면, 대표 주제어 선정부(115)는 연관도 점수 저장부(112)에 저장되어 있는, 상기 복수의 주제어들 각각에 대응되는 상기 k개의 개체명 각각과의 연관도 점수를 기초로, 상기 복수의 주제어들 중 어느 하나의 주제어를 상기 제1 이미지에 대한 대표 주제어로 선정한다. In this way, when the k number of entity name words are selected from the extracted text by the entity name word selection unit 114, the representative subject word selection unit 115 selects the plurality of entities stored in the relevance score storage unit 112. One of the plurality of subject words is selected as a representative subject word for the first image based on the score of the association with each of the k entity names corresponding to each of the subject words of .

이때, 본 발명의 일실시예에 따르면 대표 주제어 선정부(115)는 상기 복수의 주제어들 중 어느 하나의 주제어를 상기 제1 이미지에 대한 대표 주제어로 선정하기 위한 구체적인 구성으로, 벡터 생성부(120), 노름 연산부(121) 및 선정 처리부(122)를 포함할 수 있다. At this time, according to an embodiment of the present invention, the representative subject selection unit 115 is a specific configuration for selecting any one of the plurality of subject words as a representative subject word for the first image, and the vector generator 120 ), a norm calculation unit 121 and a selection processing unit 122 may be included.

벡터 생성부(120)는 개체명 단어 선택부(114)에 의해 상기 k개의 개체명 단어가 선택되면, 연관도 점수 저장부(112)를 참조하여, 상기 복수의 주제어들 각각에 대해, 각 주제어에 대응되는 상기 k개의 개체명 단어 각각과의 연관도 점수를 성분으로 갖는 k차원의 벡터를 생성함으로써, 상기 복수의 주제어들 각각에 대응되는 연관도 벡터를 생성한다. When the k number of entity name words are selected by the entity word selection unit 114, the vector generator 120 refers to the relevance score storage unit 112, and for each of the plurality of subject words, each subject word A relevance vector corresponding to each of the plurality of subject words is generated by generating a k-dimensional vector having as components a relevance score with each of the k entity name words corresponding to .

노름 연산부(121)는 상기 복수의 주제어들 각각에 대응되는 연관도 벡터의 유클리드 노름(Euclidean norm)을 연산한다. The norm operator 121 calculates a Euclidean norm of a degree of association vector corresponding to each of the plurality of subject terms.

여기서, 유클리드 노름이란 벡터나 행렬의 유클리드 공간 상에서의 크기를 나타내는 L2 노름으로, 하기의 수학식 1과 같이 나타낼 수 있다.Here, the Euclidean norm is the L2 norm representing the magnitude of a vector or matrix in Euclidean space, and can be expressed as in Equation 1 below.

이때, 는 상기 유클리드 노름을 의미하는 것으로, 는 벡터 또는 행렬의 k번째 성분을 의미한다.At this time, Means the Euclidean norm, means the k-th element of a vector or matrix.

선정 처리부(122)는 상기 복수의 주제어들 중 상기 유클리드 노름이 최대인 주제어를 상기 제1 이미지에 대한 대표 주제어로 선정한다. The selection processing unit 122 selects a subject word having the largest Euclidean norm among the plurality of subject words as a representative subject word for the first image.

이하에서는, 벡터 생성부(120), 노름 연산부(121) 및 선정 처리부(122)의 동작을 예를 들어, 상세히 설명하기로 한다. Hereinafter, operations of the vector generator 120, the norm operation unit 121, and the selection processing unit 122 will be described in detail by way of example.

먼저, 전술한 예와 같이, 상기 복수의 주제어들을 '주제어 1, 주제어 2, 주제어 3, 주제어 4'라고 하고, 개체명 단어 선택부(114)에 의해, 상기 추출된 텍스트로부터, '3'개의 개체명 단어인 '개체명 1, 개체명 2, 개체명 5'가 선택되었다고 가정하자. First, as in the above example, the plurality of subject words are referred to as 'keyword 1, subject word 2, subject word 3, and subject word 4', and '3' keywords are selected from the extracted text by the entity word selection unit 114. Suppose that entity name words 'Entity 1, Entity 2, Entity 5' are selected.

그러면, 벡터 생성부(120)는 연관도 점수 저장부(112)를 참조하여, '주제어 1, 주제어 2, 주제어 3, 주제어 4' 각각에 대해, 각 주제어에 대응되는 '개체명 1, 개체명 2, 개체명 5' 각각과의 연관도 점수를 성분으로 갖는 '3'차원의 벡터를 생성함으로써, '주제어 1, 주제어 2, 주제어 3, 주제어 4' 각각에 대응되는 연관도 벡터를 생성할 수 있다. Then, the vector generator 120 refers to the relevance score storage unit 112, and for each of 'key word 1, subject word 2, subject word 3, and subject word 4', 'entity name 1 and entity name corresponding to each subject word' By creating a '3'-dimensional vector having the relevance score with each of 2, entity name 5' as a component, relevance vectors corresponding to each of 'key word 1, subject word 2, subject word 3, and subject word 4' can be generated. there is.

관련해서, 전술한 예와 같이, '주제어 1, 주제어 2, 주제어 3, 주제어 4' 각각에 대응되는 상기 복수의 개체명 단어들 각각과의 연관도 점수가 상기 표 1과 같다고 가정하자.In relation to this, as in the above example, assume that the scores of association with each of the plurality of entity words corresponding to 'key word 1, subject word 2, subject word 3, and subject word 4' are as shown in Table 1 above.

이때, 상기 표 1에서는, '주제어 1'에 대응되는 '개체명 1, 개체명 2, 개체명 5' 각각과의 연관도 점수가 '90(점), 80(점), 85(점)'이므로, 벡터 생성부(120)는 '주제어 1'에 대해, '90, 80, 85'를 성분으로 갖는 '3'차원의 벡터를 생성함으로써, '주제어 1'에 대응되는 연관도 벡터를 '[90 80 85]'와 같이 생성할 수 있다. In this case, in Table 1, the correlation score with each of 'entity name 1, entity name 2, and entity name 5' corresponding to 'key word 1' is '90 (point), 80 (point), 85 (point)' Therefore, the vector generator 120 generates a '3'-dimensional vector having '90, 80, 85' as components for 'key word 1', thereby converting the degree of association vector corresponding to 'key word 1' to '[ 90 80 85]'.

이러한 방식으로, 벡터 생성부(120)는 '주제어 1, 주제어 2, 주제어 3, 주제어 4' 각각에 대응되는 연관도 벡터를 생성할 수 있다.In this way, the vector generator 120 may generate relevance vectors corresponding to 'main word 1, main word 2, main word 3, and main word 4', respectively.

그러면, 노름 연산부(121)는 상기 수학식 1을 기초로, '주제어 1, 주제어 2, 주제어 3, 주제어 4' 각각에 대응되는 연관도 벡터의 유클리드 노름을 연산할 수 있다. Then, the norm calculator 121 may calculate the Euclidean norm of the relevance vector corresponding to 'main word 1, main word 2, main word 3, and main word 4', respectively, based on Equation 1 above.

그 결과, '주제어 1, 주제어 2, 주제어 3, 주제어 4' 각각에 대응되는 연관도 벡터 중 '주제어 3'에 대응되는 연관도 벡터의 유클리드 노름이 최대로 연산되었다고 하는 경우, 선정 처리부(122)는 '주제어 3'을 '이미지 1(210)'에 대한 대표 주제어로 선정할 수 있다.As a result, if it is assumed that the Euclidean norm of the relevance vector corresponding to 'main word 3' among the relevance vectors corresponding to 'main word 1, main word 2, main word 3, and main word 4' is maximized, the selection processing unit 122 may select 'key word 3' as a representative subject word for 'image 1 (210)'.

이렇게, 대표 주제어 선정부(115)에 의해 상기 제1 이미지에 대한 대표 주제어가 선정되면, 명령 전송부(116)는 출처 정보 데이터베이스 서버(140)(출처 정보 데이터베이스 서버(140)에는 사전 수집된 복수의 출처 정보들과, 각 출처 정보에 대응되는 연관 키워드들이 서로 대응되어 저장되어 있음)에 접속하여, 출처 정보 데이터베이스 서버(140)로, 상기 제1 이미지에 대한 대표 주제어를 전송하면서, 상기 복수의 출처 정보들 중 연관 키워드들 내에 상기 제1 이미지에 대한 대표 주제어가 포함되어 있는 출처 정보를 검색하여 전송할 것을 지시하는 출처 정보 검색 명령을 전송한다. In this way, when the representative subject word for the first image is selected by the representative subject word selection unit 115, the command transmission unit 116 sends the source information database server 140 (a plurality of pre-collected pluralities in the source information database server 140). The source information of the source information and related keywords corresponding to each source information are stored corresponding to each other), and while transmitting a representative keyword for the first image to the source information database server 140, the plurality of A source information search command instructing to search for and transmit source information including a representative subject word for the first image in related keywords among source information is transmitted.

전송 요청부(117)는 출처 정보 데이터베이스 서버(140)에 의해, 상기 복수의 출처 정보들 중 연관 키워드들 내에 상기 제1 이미지에 대한 대표 주제어가 포함된 출처 정보로, 적어도 하나의 출처 정보가 검색됨에 따라, 출처 정보 데이터베이스 서버(140)로부터, 상기 적어도 하나의 출처 정보가 검색되었음을 지시하는 출처 정보 검색 결과가 수신되면, 출처 정보 데이터베이스 서버(140)로, 상기 적어도 하나의 출처 정보와 상기 적어도 하나의 출처 정보 각각에 대응되는 연관 키워드들에 대한 정보의 전송을 요청한다. The transmission requesting unit 117 searches for at least one piece of source information as source information including a representative subject word for the first image in related keywords among the plurality of pieces of source information by the source information database server 140. Accordingly, when a source information search result indicating that the at least one source information has been searched is received from the source information database server 140, the at least one source information and the at least one source information are sent to the source information database server 140. Request transmission of information on related keywords corresponding to each source information of .

출처 정보 선택부(118)는 상기 정보 전송 요청에 대응하여, 출처 정보 데이터베이스 서버(140)로부터, 상기 적어도 하나의 출처 정보와 상기 적어도 하나의 출처 정보 각각에 대응되는 연관 키워드들에 대한 정보가 수신되면, 상기 적어도 하나의 출처 정보 각각에 대해, 각 출처 정보에 대응되는 연관 키워드들에 상기 k개의 개체명 단어 중 몇 개의 개체명 단어가 포함되어 있는지 확인하여, 상기 적어도 하나의 출처 정보 중 연관 키워드들 내에 상기 k개의 개체명 단어가 가장 많이 포함되어 있는 제1 출처 정보를, 상기 제1 이미지에 대한 출처 정보로 선택한다. In response to the information transmission request, the source information selector 118 receives information about the at least one source information and related keywords corresponding to each of the at least one source information from the source information database server 140. Then, for each of the at least one source information, it is checked how many of the k entity name words are included in the related keywords corresponding to each source information, and the related keywords among the at least one source information The first source information in which the k number of entity name words are included the most is selected as the source information for the first image.

이하에서는, 명령 전송부(116), 전송 요청부(117) 및 출처 정보 선택부(118)의 동작을 예를 들어, 상세히 설명하기로 한다. Hereinafter, operations of the command transmission unit 116, the transmission request unit 117, and the source information selection unit 118 will be described in detail, for example.

먼저, 출처 정보 데이터베이스 서버(140)에는 하기의 표 2와 같은 사전 수집된 복수의 출처 정보들과, 각 출처 정보에 대응되는 연관 키워드들이 저장되어 있다고 가정하자. First, it is assumed that the source information database server 140 stores a plurality of pre-collected source information as shown in Table 2 below and related keywords corresponding to each source information.

출처 정보source information 연관 키워드related keywords 출처 정보 1source information 1 주제어 1Key word 1 개체명 2entity name 2 개체명 5entity name 5 주제어 3Key word 3 출처 정보 2source information 2 개체명 1entity name 1 개체명 2entity name 2 주제어 1Key word 1 주제어 2Key word 2 출처 정보 3source information 3 개체명 1entity name 1 개체명 3entity name 3 주제어 4Key word 4 주제어 5Key word 5

또한, 전술한 예와 같이, 대표 주제어 선정부(115)에 의해, '주제어 3'이 '이미지 1(210)'에 대한 대표 주제어로 선정되었다고 가정하자. Also, as in the above example, assume that 'key word 3' is selected as a representative subject word for 'image 1 (210)' by the representative subject word selector 115.

그러면, 명령 전송부(116)는 출처 정보 데이터베이스 서버(140)에 접속하여, 출처 정보 데이터베이스 서버(140)로, '주제어 3'을 전송하면서, 상기 복수의 출처 정보들 중 연관 키워드들 내에 '주제어 3'이 포함되어 있는 출처 정보를 검색하여 전송할 것을 지시하는 출처 정보 검색 명령을 전송할 수 있다. Then, the command transmission unit 116 accesses the source information database server 140 and transmits 'keyword 3' to the source information database server 140, while 'keyword 3' is included in related keywords among the plurality of source information. A source information search command instructing to search for and transmit source information including 3' may be transmitted.

이때, 상기 표 2에서는, 상기 복수의 출처 정보들 중, '주제어 3'이 연관 키워드들 내에 포함되어 있는 출처 정보가 '출처 정보 1, 출처 정보 3'이므로, 출처 정보 데이터베이스 서버(140)는 상기 출처 정보 검색 명령에 대응하여, 상기 복수의 출처 정보들 중 연관 키워드들 내에 '주제어 3'이 포함되어 있는 출처 정보로, '출처 정보 1, 출처 정보 3'을 검색할 수 있고, '출처 정보 1, 출처 정보 3'이 검색되었음을 지시하는 출처 정보 검색 결과를 전자 단말 장치(110)로 전송할 수 있다. At this time, in Table 2, since the source information in which 'keyword 3' is included in the related keywords among the plurality of source information is 'source information 1 and source information 3', the source information database server 140 In response to the source information search command, 'source information 1, source information 3' may be searched as source information including 'key word 3' in related keywords among the plurality of source information, and 'source information 1 , a source information search result indicating that source information 3' has been searched can be transmitted to the electronic terminal device 110 .

이에 따라, 전자 단말 장치(110)에 상기 출처 정보 검색 결과가 수신되면, 전송 요청부(117)는 출처 정보 데이터베이스 서버(140)로, '출처 정보 1, 출처 정보 3'과 '출처 정보 1, 출처 정보 3' 각각에 대응되는 연관 키워드들에 대한 정보의 전송을 요청할 수 있다. Accordingly, when the source information search result is received by the electronic terminal device 110, the transmission requesting unit 117 sends 'source information 1, source information 3' and 'source information 1, to the source information database server 140. Transmission of information on related keywords corresponding to each source information 3' may be requested.

이때, 상기 표 2에서는, '출처 정보 1'에 대응되는 연관 키워드들이 '개체명 1, 개체명 2, 개체명 5, 주제어 3'이고, '출처 정보 3'에 대응되는 연관 키워드들이 '개체명 1, 개체명 3, 주제어 4, 주제어 5'이므로, 출처 정보 데이터베이스 서버(140)는 상기 정보의 전송 요청에 대응하여, '출처 정보 1, 출처 정보 3'과 '출처 정보 1'에 대응되는 연관 키워드들인 '개체명 1, 개체명 2, 개체명 5, 주제어 3' 및 '출처 정보 3'에 대응되는 연관 키워드들인 '개체명 1, 개체명 3, 주제어 4, 주제어 5'에 대한 정보를 전자 단말 장치(110)로 전송할 수 있다. In this case, in Table 2, the related keywords corresponding to 'source information 1' are 'entity name 1, entity name 2, entity name 5, and subject word 3', and the related keywords corresponding to 'source information 3' are 'entity name 1, object name 3, subject word 4, subject word 5', the source information database server 140 responds to the request for transmission of the information, and establishes associations corresponding to 'source information 1, source information 3' and 'source information 1'. Information on 'entity name 1, entity name 3, subject name 4, subject word 5', which are related keywords corresponding to the keywords 'entity name 1, entity name 2, entity name 5, subject word 3' and 'source information 3', is electronically transmitted. It can be transmitted to the terminal device 110.

이에 따라, 전자 단말 장치(110)에 '출처 정보 1, 출처 정보 3'과 '출처 정보 1, 출처 정보 3' 각각에 대응되는 연관 키워드들에 대한 정보가 수신되면, 출처 정보 선택부(118)는 '출처 정보 1, 출처 정보 3' 각각에 대해, 각 출처 정보에 대응되는 연관 키워드들에 '개체명 1, 개체명 2, 개체명 5' 중 몇 개의 개체명 단어가 포함되어 있는지 확인할 수 있다. Accordingly, when information on related keywords corresponding to 'source information 1 and source information 3' and 'source information 1 and source information 3' is received by the electronic terminal device 110, the source information selector 118 For each of 'source information 1 and source information 3', it is possible to check how many entity name words among 'entity name 1, entity name 2, and entity name 5' are included in the related keywords corresponding to each source information. .

이때, '출처 정보 1'에 대응되는 연관 키워드들인 '개체명 1, 개체명 2, 개체명 5, 주제어 3'에는, '개체명 1, 개체명 2, 개체명 5' 중 '개체명 1, 개체명 2, 개체명 5'가 포함되어 있고, '출처 정보 3'에 대응되는 연관 키워드들인 '개체명 1, 개체명 3, 주제어 4, 주제어 5'에는, '개체명 1, 개체명 2, 개체명 5' 중 '개체명 1'이 포함되어 있으므로, 출처 정보 선택부(118)는 '출처 정보 1, 출처 정보 3' 중 연관 키워드들 내에 '개체명 1, 개체명 2, 개체명 5'가 가장 많이 포함되어 있는 '출처 정보 1'을, '이미지 1(210)'에 대한 출처 정보로 선택할 수 있다. At this time, in 'entity name 1, entity name 2, entity name 5, and keyword 3', which are related keywords corresponding to 'source information 1', 'entity name 1, entity name 2, entity name 5' among 'entity name 1, entity name 2, entity name 5' 'Entity Name 2, Entity Name 5' are included, and 'Entity Name 1, Entity Name 3, Key Word 4, and Key Word 5', which are related keywords corresponding to 'Source Information 3', include 'Entity Name 1, Entity Name 2, Since 'entity name 1' is included in 'entity name 5', the source information selector 118 selects 'entity name 1, entity name 2, and entity name 5' among related keywords among 'source information 1 and source information 3'. 'Source information 1' containing the most may be selected as the source information for 'Image 1 (210)'.

이렇게, 출처 정보 선택부(118)에 의해 상기 제1 출처 정보가 상기 제1 이미지에 대한 출처 정보로 선택되면, 출처 정보 삽입부(119)는 상기 제1 출처 정보를 상기 전자 문서에 삽입한다. In this way, when the first source information is selected as the source information for the first image by the source information selector 118, the source information inserter 119 inserts the first source information into the electronic document.

이때, 본 발명의 일실시예에 따르면, 출처 정보 삽입부(119)는 출처 정보 선택부(118)에 의해 상기 제1 출처 정보가 상기 제1 이미지에 대한 출처 정보로 선택되면, 상기 전자 문서에서 이미 생성 완료된 출처 정보들이 존재하는지 확인하여, 상기 전자 문서에서 상기 제1 출처 정보가 생성된 누적 순번을 확인한 후 상기 전자 문서의 마지막 페이지에 사전 설정되어 있는 복수의 출처 정보 삽입 지점들(여기서, 상기 복수의 출처 정보 삽입 지점들 각각에는 서로 다른 삽입 순번이 사전 할당되어 있음) 중, 상기 확인된 누적 순번에 대응되는 삽입 순번이 할당되어 있는 제1 삽입 지점에 상기 제1 출처 정보를 삽입할 수 있다. At this time, according to one embodiment of the present invention, the source information insertion unit 119, when the first source information is selected as the source information for the first image by the source information selection unit 118, in the electronic document A plurality of source information insertion points preset in the last page of the electronic document (here, after confirming the cumulative order in which the first source information was generated in the electronic document by checking whether source information that has already been created exists) Among the plurality of source information insertion points, different insertion order numbers are pre-assigned), the first source information may be inserted into a first insertion point to which an insertion order corresponding to the confirmed cumulative order is assigned. .

관련해서, 도 3에 도시된 그림과 같이, 상기 전자 문서(200)의 마지막 페이지(201)에는, 복수의 출처 정보 삽입 지점들(211, 212, 213, 214, 215)이 사전 설정되어 있을 수 있고, 복수의 출처 정보 삽입 지점들(211, 212, 213, 214, 215) 각각에는 하기의 표 3과 같은 서로 다른 삽입 순번이 사전 할당되어 있을 수 있다.In this regard, as shown in FIG. 3 , a plurality of source information insertion points 211, 212, 213, 214, and 215 may be preset in the last page 201 of the electronic document 200. , and each of the plurality of source information insertion points 211, 212, 213, 214, and 215 may be pre-allocated with different insertion order numbers as shown in Table 3 below.

출처 정보 삽입 지점source information insertion point 삽입 순번 (번)Insertion sequence (number) 삽입 지점 1(211)Insertion point 1 (211) 1One 삽입 지점 2(212)Insertion point 2 (212) 22 삽입 지점 3(213)Insertion point 3 (213) 33 삽입 지점 4(214)Insertion point 4 (214) 44 삽입 지점 5(215)Insertion point 5 (215) 55

이때, 전술한 예와 같이, 출처 정보 선택부(118)에 의해, '출처 정보 1'이 '이미지 1(210)'에 대한 출처 정보로 선택되었다고 하는 경우, 출처 정보 삽입부(119)는 전자 문서(200)에서 이미 생성 완료된 출처 정보들이 존재하는지 확인하여, 전자 문서(200)에서 '출처 정보 1'이 생성된 누적 순번을 확인할 수 있다. At this time, as in the above example, when it is assumed that 'source information 1' is selected as the source information for 'Image 1 (210)' by the source information selection unit 118, the source information insertion unit 119 electronically In the document 200 , it is confirmed whether source information that has already been generated exists, and the cumulative order in which 'source information 1' is generated in the electronic document 200 may be confirmed.

그 결과, 전자 문서(200)에서 '출처 정보 1'이 생성된 누적 순번이 '1번'인 것으로 확인되었다고 하는 경우, 상기 표 3에서는, 복수의 출처 정보 삽입 지점들(211, 212, 213, 214, 215) 중 '1번'이 삽입 순번으로 할당되어 있는 출처 정보 삽입 지점이 '삽입 지점 1(211)'이므로, 출처 정보 삽입부(119)는 '삽입 지점 1(211)'에 '출처 정보 1'을 삽입할 수 있다.As a result, when it is confirmed that the cumulative order number in which 'source information 1' is generated in the electronic document 200 is 'No. 1', in Table 3, a plurality of source information insertion points 211, 212, 213, 214, 215), since the source information insertion point to which 'No. 1' is assigned as the insertion order is 'insertion point 1 (211)', the source information insertion unit 119 inserts the 'source information insertion point 1 (211)' into 'insertion point 1 (211)'. Information 1' can be inserted.

이때, 본 발명의 일실시예에 따르면, 전자 단말 장치(110)는 위치 정보 추가부(123) 및 출처 정보 표시부(124)를 더 포함할 수 있다. At this time, according to an embodiment of the present invention, the electronic terminal device 110 may further include a location information addition unit 123 and a source information display unit 124.

위치 정보 추가부(123)는 출처 정보 삽입부(119)에 의해, 상기 제1 삽입 지점에 상기 제1 출처 정보가 삽입되면, 상기 제1 이미지에 대한 개체 속성에 상기 제1 삽입 지점의 상기 전자 문서 상에서의 위치 정보를 추가한다. When the first source information is inserted into the first insertion point by the source information insertion unit 119, the location information adding unit 123 adds the object property of the first image to the first insertion point. Add location information on the document.

출처 정보 표시부(124)는 위치 정보 추가부(123)에 의해 상기 제1 이미지에 대한 개체 속성에 상기 제1 삽입 지점의 위치 정보가 추가된 이후, 사용자(130)에 의해, 상기 전자 문서에서 상기 제1 이미지에 대한 선택 명령이 인가되면, 상기 제1 이미지에 대한 개체 속성을 참조하여 상기 제1 삽입 지점의 위치 정보를 확인한 후 상기 제1 삽입 지점의 위치 정보를 기초로, 상기 전자 문서 상에서의 상기 제1 삽입 지점에 삽입되어 있는 상기 제1 출처 정보를 확인하여, 상기 전자 문서 상에서 상기 제1 이미지가 삽입되어 있는 지점의 인접 지점에 상기 제1 출처 정보를 표시한다. After the location information of the first insertion point is added to the object properties of the first image by the location information adding unit 123, the source information display unit 124, by the user 130, retrieves information from the electronic document. When a selection command for the first image is applied, location information of the first insertion point is checked by referring to the object properties of the first image, and based on the location information of the first insertion point, the location information of the first insertion point on the electronic document is determined. The first source information inserted into the first insertion point is checked, and the first source information is displayed at a point adjacent to the point where the first image is inserted on the electronic document.

이하에서는, 위치 정보 추가부(123) 및 출처 정보 표시부(124)의 동작을 예를 들어, 상세히 설명하기로 한다. Hereinafter, operations of the location information adding unit 123 and the source information displaying unit 124 will be described in detail, for example.

먼저, 전술한 예와 같이, 출처 정보 삽입부(119)에 의해, '삽입 지점 1(211)'에 '출처 정보 1'이 삽입되었다고 가정하자.First, it is assumed that 'source information 1' is inserted into 'insertion point 1 (211)' by the source information inserter 119 as in the above example.

그러면, 위치 정보 추가부(123)는 '이미지 1(210)'에 대한 개체 속성에 '삽입 지점 1(211)'의 전자 문서(200) 상에서의 위치 정보를 추가할 수 있다. Then, the location information adding unit 123 may add the location information of the 'insertion point 1 (211)' on the electronic document 200 to the object properties of the 'image 1 (210)'.

그 이후, 사용자(130)에 의해, 전자 문서(200)에서 '이미지 1(210)'에 대한 선택 명령이 인가되었다고 가정하자. 여기서, 사용자(130)는 전자 문서(200) 상에서 '이미지 1(210)'을 클릭함으로써, '이미지 1(210)'에 대한 선택 명령을 인가할 수 있다. After that, it is assumed that a selection command for 'Image 1 (210)' in the electronic document 200 is applied by the user 130 . Here, the user 130 may apply a selection command for 'Image 1 210 ' by clicking 'Image 1 210' on the electronic document 200 .

그러면, 출처 정보 표시부(124)는 '이미지 1(210)'에 대한 개체 속성을 참조하여 '삽입 지점 1(211)'의 위치 정보를 확인할 수 있다. Then, the source information display unit 124 may check the location information of the 'insertion point 1 (211)' by referring to the object properties of the 'image 1 (210)'.

그러고 나서, 출처 정보 표시부(124)는 '삽입 지점 1(211)'의 위치 정보를 기초로, 전자 문서(200) 상에서의 '삽입 지점 1(211)'에 삽입되어 있는 '출처 정보 1'을 확인하여, 도 4에 도시된 그림과 같이, 전자 문서(200) 상에서 '이미지 1(210)'이 삽입되어 있는 지점의 인접 지점(220)에 '출처 정보 1'을 표시할 수 있다. Then, the source information display unit 124 displays the 'source information 1' inserted at the 'insertion point 1 211' on the electronic document 200 based on the location information of the 'insertion point 1 211'. After confirmation, as shown in FIG. 4 , 'source information 1' may be displayed at a point 220 adjacent to the point where 'image 1 210' is inserted on the electronic document 200.

이때, 본 발명의 일실시예에 따르면, 전자 단말 장치(110)는 검색 결과 표시부(125)를 더 포함할 수 있다.At this time, according to an embodiment of the present invention, the electronic terminal device 110 may further include a search result display unit 125 .

검색 결과 표시부(125)는 출처 정보 표시부(124)에 의해 상기 제1 이미지가 삽입되어 있는 지점의 인접 지점에 상기 제1 출처 정보가 표시된 이후, 사용자(130)에 의해, 상기 제1 출처 정보를 기초로 하여 상기 제1 이미지에 대한 원본 이미지를 검색할 것을 지시하는 원본 이미지 검색 명령이 인가되면, 전자 단말 장치(110)에 사전 설치되어 있는 웹 브라우저를 실행한 후, 사전 지정된 검색 사이트에 접속하여, 상기 제1 출처 정보를 검색어로 한 정보 검색 명령을 실행함으로써, 상기 웹 브라우저 상에서 상기 제1 출처 정보에 대한 검색 결과를 표시한다. The search result display unit 125 displays the first source information by the user 130 after the first source information is displayed at a point adjacent to the point where the first image is inserted by the source information display unit 124. When an original image search command instructing to search for an original image for the first image based on the first image is applied, a web browser pre-installed in the electronic terminal device 110 is executed, and then a pre-designated search site is accessed. , By executing an information search command using the first source information as a search term, a search result for the first source information is displayed on the web browser.

예컨대, 전술한 예와 같이, 출처 정보 표시부(124)에 의해 '이미지 1(210)'이 삽입되어 있는 지점의 인접 지점(220)에 '출처 정보 1'이 표시되었다고 하고, 그 이후, 사용자(130)에 의해, '출처 정보 1'을 기초로 하여 '이미지 1(210)'에 대한 원본 이미지를 검색할 것을 지시하는 원본 이미지 검색 명령이 인가되었다고 가정하자. For example, as in the above-described example, it is assumed that 'source information 1' is displayed at a point adjacent to the point 220 where 'image 1 210' is inserted by the source information display unit 124, and then, the user ( 130), it is assumed that an original image search command instructing to search for an original image for 'image 1 (210)' based on 'source information 1' is applied.

그러면, 검색 결과 표시부(125)는 전자 단말 장치(110)에 사전 설치되어 있는 웹 브라우저를 실행한 후, 사전 지정된 검색 사이트에 접속하여, '출처 정보 1'을 검색어로 한 정보 검색 명령을 실행함으로써, 상기 웹 브라우저 상에서 '출처 정보 1'에 대한 검색 결과를 표시할 수 있다. Then, the search result display unit 125 executes a web browser pre-installed in the electronic terminal device 110, accesses a pre-designated search site, and executes an information search command using 'source information 1' as a search term. , a search result for 'source information 1' may be displayed on the web browser.

또한, 본 발명의 일실시예에 따르면, 전자 단말 장치(110)는 상기 제1 출처 정보가 유료 인용 자료인지 여부를 확인하여 사용자(130)에게 안내하는 기능을 추가로 지원할 수 있다. In addition, according to an embodiment of the present invention, the electronic terminal device 110 may additionally support a function of determining whether the first source information is paid quotation data and providing guidance to the user 130 .

이와 관련해서, 본 발명의 일실시예에 따르면, 출처 정보 데이터베이스 서버(140)에는, 상기 복수의 출처 정보들 각각에, 각 출처 정보가 유료 인용 자료인지 무료 인용 자료인지 여부에 대한 유무료 확인 정보가 추가로 대응되어 저장되어 있을 수 있다. In this regard, according to one embodiment of the present invention, in the source information database server 140, in each of the plurality of source information, paid or free confirmation information about whether each source information is paid citation data or free citation data is provided. It may be additionally corresponded and stored.

예컨대, 출처 정보 데이터베이스 서버(140)에는 하기의 표 4와 같은, 상기 복수의 출처 정보들 각각에 유무료 확인 정보가 추가로 대응되어 저장되어 있을 수 있다. For example, in the source information database server 140, as shown in Table 4 below, paid and free confirmation information may be additionally stored in correspondence with each of the plurality of source information.

출처 정보source information 유무료 확인 정보Free Verification Information 출처 정보 1source information 1 유료pay 출처 정보 2source information 2 유료pay 출처 정보 3source information 3 무료free

이때, 본 발명의 일실시예에 따르면, 전자 단말 장치(110)는 정보 확인부(126) 및 메시지 표시부(127)를 더 포함할 수 있다. At this time, according to an embodiment of the present invention, the electronic terminal device 110 may further include an information confirmation unit 126 and a message display unit 127.

정보 확인부(126)는 출처 정보 삽입부(119)에 의해, 상기 제1 출처 정보가 상기 전자 문서에 삽입되면, 출처 정보 테이터베이스 서버(140)에 접속하여 상기 제1 출처 정보에 대응되는 유무료 확인 정보를 확인함으로써, 상기 제1 출처 정보가 유료 인용 자료인지 무료 인용 자료인지 여부를 확인한다. When the first source information is inserted into the electronic document by the source information inserter 119, the information confirmation unit 126 connects to the source information database server 140 and provides a paid and free data corresponding to the first source information. By checking the confirmation information, it is determined whether the first source information is paid citation data or free citation data.

메시지 표시부(127)는 정보 확인부(126)에 의해 상기 제1 출처 정보가 유료 인용 자료인 것으로 확인되면, 상기 제1 이미지가 유료 인용 자료임을 안내하는 유료 안내 메시지를 화면 상에 표시한다. When it is confirmed by the information checking unit 126 that the first source information is paid citation material, the message display unit 127 displays a paid information message on the screen to inform that the first image is paid citation material.

이하에서는, 정보 확인부(126) 및 메시지 표시부(127)의 동작을 예를 들어, 상세히 설명하기로 한다. Hereinafter, operations of the information checking unit 126 and the message display unit 127 will be described in detail, for example.

먼저, 전술한 예와 같이, 출처 정보 삽입부(119)에 의해 '출처 정보 1'이 전자 문서(200)에 삽입되었다고 하는 경우, 정보 확인부(126)는 출처 정보 테이터베이스 서버(140)에 접속하여 '출처 정보 1'에 대응되는 유무료 확인 정보를 확인할 수 있다. First, as in the above example, when 'source information 1' is inserted into the electronic document 200 by the source information inserter 119, the information checker 126 sends information to the source information database server 140. You can access and check paid and free confirmation information corresponding to 'source information 1'.

관련해서, 상기 표 4에서는, '출처 정보 1'에 대응되는 유무료 확인 정보가 '유료'인 것으로 저장되어 있으므로, 정보 확인부(126)는 출처 정보 테이터베이스 서버(140)에 접속하여 '출처 정보 1'이 '유료 인용 자료'인 것으로 확인할 수 있다. In this regard, in Table 4, since paid and free confirmation information corresponding to 'source information 1' is stored as 'paid', the information confirmation unit 126 accesses the source information database server 140 to obtain 'source information 1' is 'paid citation data'.

그러면, 메시지 표시부(127)는 '출처 정보 1'이 '유료 인용 자료'임을 안내하는 유료 안내 메시지를 화면 상에 표시할 수 있다. Then, the message display unit 127 may display a paid guidance message on the screen, informing that 'source information 1' is 'paid reference material'.

도 5는 본 발명의 일실시예에 따른 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치의 동작 방법을 도시한 순서도이다.5 is a flowchart illustrating an operating method of an electronic terminal device for automatically inserting source information of an image inserted into an electronic document according to an embodiment of the present invention.

단계(S510)에서는 사전 설정된 복수의 개체명 단어들이 저장되어 있는 개체명 단어 저장부를 유지한다. In step S510, an entity name word storage unit in which a plurality of preset entity name words are stored is maintained.

단계(S520)에서는 사전 설정된 복수의 주제어들과, 각 주제어별로 사전 지정된 상기 복수의 개체명 단어들 각각과의 연관도 점수(상기 연관도 점수가 높을수록 주제어와 개체명 단어 간의 연관도가 높음을 의미함)가 대응되어 저장되어 있는 연관도 점수 저장부를 유지한다. In step S520, the relevance score between a plurality of pre-set subject words and each of the plurality of pre-specified subject words for each subject word (the higher the relevance score, the higher the relevance between the subject word and the subject word). It maintains the relevance score storage unit in which the meaning) is stored in correspondence with each other.

단계(S530)에서는 사용자에 의해, 전자 문서에, 텍스트가 포함되어 있는 제1 이미지가 삽입되면, 사전 설정된 텍스트 인식 모델을 기초로, 상기 제1 이미지에 대한 텍스트 인식을 수행하여 상기 제1 이미지에 포함되어 있는 텍스트를 추출한다. In step S530, when a first image containing text is inserted into the electronic document by the user, text recognition is performed on the first image based on a preset text recognition model to obtain the first image. Extracts the text it contains.

단계(S540)에서는 상기 제1 이미지에 포함되어 있는 텍스트가 추출되면, 상기 추출된 텍스트에서 상기 복수의 개체명 단어들이 등장하는지 여부를 확인하여, 상기 추출된 텍스트에서 상기 복수의 개체명 단어들 중 k(k는 자연수임)개의 개체명 단어가 등장하는 것으로 확인되면, 상기 추출된 텍스트로부터 상기 k개의 개체명 단어를 선택한다. In step S540, if the text included in the first image is extracted, it is checked whether the plurality of entity name words appear in the extracted text, and among the plurality of entity name words in the extracted text If it is confirmed that k (k is a natural number) number of entity words appear, the k entity name words are selected from the extracted text.

단계(S550)에서는 상기 추출된 텍스트로부터 상기 k개의 개체명 단어가 선택되면, 상기 연관도 점수 저장부에 저장되어 있는, 상기 복수의 주제어들 각각에 대응되는 상기 k개의 개체명 단어 각각과의 연관도 점수를 기초로, 상기 복수의 주제어들 중 어느 하나의 주제어를 상기 제1 이미지에 대한 대표 주제어로 선정한다. In step S550, when the k number of entity name words are selected from the extracted text, association with each of the k entity name words corresponding to each of the plurality of subject words stored in the relevance score storage unit. Based on the degree score, one of the plurality of subject words is selected as a representative subject word for the first image.

단계(S560)에서는 상기 제1 이미지에 대한 대표 주제어가 선정되면, 출처 정보 데이터베이스 서버(상기 출처 정보 데이터베이스 서버에는 사전 수집된 복수의 출처 정보들과, 각 출처 정보에 대응되는 연관 키워드들이 서로 대응되어 저장되어 있음)에 접속하여, 상기 출처 정보 데이터베이스 서버로, 상기 제1 이미지에 대한 대표 주제어를 전송하면서, 상기 복수의 출처 정보들 중 연관 키워드들 내에 상기 제1 이미지에 대한 대표 주제어가 포함되어 있는 출처 정보를 검색하여 전송할 것을 지시하는 출처 정보 검색 명령을 전송한다. In step S560, when a representative subject word for the first image is selected, a source information database server (in the source information database server, a plurality of pre-collected source information and related keywords corresponding to each source information correspond to each other) Stored), and while transmitting a representative subject word for the first image to the source information database server, the representative subject word for the first image is included in related keywords among the plurality of source information Transmits a source information retrieval command instructing source information to be retrieved and transmitted.

단계(S570)에서는 상기 출처 정보 데이터베이스 서버에 의해, 상기 복수의 출처 정보들 중 연관 키워드들 내에 상기 제1 이미지에 대한 대표 주제어가 포함된 출처 정보로, 적어도 하나의 출처 정보가 검색됨에 따라, 상기 출처 정보 데이터베이스 서버로부터, 상기 적어도 하나의 출처 정보가 검색되었음을 지시하는 출처 정보 검색 결과가 수신되면, 상기 출처 정보 데이터베이스 서버로, 상기 적어도 하나의 출처 정보와 상기 적어도 하나의 출처 정보 각각에 대응되는 연관 키워드들에 대한 정보의 전송을 요청한다. In step S570, as the source information database server searches for at least one piece of source information as source information including a representative subject word for the first image in related keywords among the plurality of pieces of source information, When a source information search result indicating that the at least one source information has been searched is received from the source information database server, the at least one source information and the association corresponding to each of the at least one source information are sent to the source information database server. Request transmission of information about keywords.

단계(S580)에서는 상기 정보 전송 요청에 대응하여, 상기 출처 정보 데이터베이스 서버로부터, 상기 적어도 하나의 출처 정보와 상기 적어도 하나의 출처 정보 각각에 대응되는 연관 키워드들에 대한 정보가 수신되면, 상기 적어도 하나의 출처 정보 각각에 대해, 각 출처 정보에 대응되는 연관 키워드들에 상기 k개의 개체명 단어 중 몇 개의 개체명 단어가 포함되어 있는지 확인하여, 상기 적어도 하나의 출처 정보 중 연관 키워드들 내에 상기 k개의 개체명 단어가 가장 많이 포함되어 있는 제1 출처 정보를, 상기 제1 이미지에 대한 출처 정보로 선택한다. In step S580, when information on the at least one source information and related keywords corresponding to each of the at least one source information is received from the source information database server in response to the information transmission request, the at least one source information is received. For each source information of , it is checked how many entity name words among the k entity name words are included in the related keywords corresponding to each source information, and the k number of entity name words are included in the related keywords among the at least one source information. The first source information containing the most entity name words is selected as the source information for the first image.

단계(S590)에서는 상기 제1 출처 정보가 상기 제1 이미지에 대한 출처 정보로 선택되면, 상기 제1 출처 정보를 상기 전자 문서에 삽입한다. In step S590, if the first source information is selected as the source information for the first image, the first source information is inserted into the electronic document.

이때, 본 발명의 일실시예에 따르면, 단계(S550)에서는 상기 k개의 개체명 단어가 선택되면, 상기 연관도 점수 저장부를 참조하여, 상기 복수의 주제어들 각각에 대해, 각 주제어에 대응되는 상기 k개의 개체명 단어 각각과의 연관도 점수를 성분으로 갖는 k차원의 벡터를 생성함으로써, 상기 복수의 주제어들 각각에 대응되는 연관도 벡터를 생성하는 단계, 상기 복수의 주제어들 각각에 대응되는 연관도 벡터의 유클리드 노름을 연산하는 단계 및 상기 복수의 주제어들 중 상기 유클리드 노름이 최대인 주제어를 상기 제1 이미지에 대한 대표 주제어로 선정하는 단계를 포함할 수 있다.At this time, according to an embodiment of the present invention, in step S550, if the k number of entity name words are selected, the relevance score storage unit is referred to, and for each of the plurality of subject words, the above information corresponding to each subject word is referred to. Generating a relevance vector corresponding to each of the plurality of subject words by generating a k-dimensional vector having a relevance score with each of the k entity name words as a component, and an association corresponding to each of the plurality of subject words. The method may include calculating a Euclidean norm of the degree vector and selecting a subject word having the largest Euclidean norm among the plurality of subject words as a representative subject word for the first image.

또한, 본 발명의 일실시예에 따르면, 단계(S590)에서는 상기 제1 출처 정보가 상기 제1 이미지에 대한 출처 정보로 선택되면, 상기 전자 문서에서 이미 생성 완료된 출처 정보들이 존재하는지 확인하여, 상기 전자 문서에서 상기 제1 출처 정보가 생성된 누적 순번을 확인한 후 상기 전자 문서의 마지막 페이지에 사전 설정되어 있는 복수의 출처 정보 삽입 지점들(상기 복수의 출처 정보 삽입 지점들 각각에는 서로 다른 삽입 순번이 사전 할당되어 있음) 중, 상기 확인된 누적 순번에 대응되는 삽입 순번이 할당되어 있는 제1 삽입 지점에 상기 제1 출처 정보를 삽입할 수 있고, 상기 전자 단말 장치의 동작 방법은 단계(S590)에 의해, 상기 제1 삽입 지점에 상기 제1 출처 정보가 삽입되면, 상기 제1 이미지에 대한 개체 속성에 상기 제1 삽입 지점의 상기 전자 문서 상에서의 위치 정보를 추가하는 단계 및 상기 제1 이미지에 대한 개체 속성에 상기 제1 삽입 지점의 위치 정보가 추가된 이후, 상기 사용자에 의해, 상기 전자 문서에서 상기 제1 이미지에 대한 선택 명령이 인가되면, 상기 제1 이미지에 대한 개체 속성을 참조하여 상기 제1 삽입 지점의 위치 정보를 확인한 후 상기 제1 삽입 지점의 위치 정보를 기초로, 상기 전자 문서 상에서의 상기 제1 삽입 지점에 삽입되어 있는 상기 제1 출처 정보를 확인하여, 상기 전자 문서 상에서 상기 제1 이미지가 삽입되어 있는 지점의 인접 지점에 상기 제1 출처 정보를 표시하는 단계를 더 포함할 수 있다. In addition, according to one embodiment of the present invention, in step S590, if the first source information is selected as the source information for the first image, it is checked whether source information that has already been created exists in the electronic document, and the After checking the cumulative order in which the first source information was generated in the electronic document, a plurality of source information insertion points preset on the last page of the electronic document (each of the plurality of source information insertion points having a different insertion order) pre-assigned), the first source information may be inserted into a first insertion point to which an insertion sequence corresponding to the confirmed cumulative sequence is assigned, and the operation method of the electronic terminal device is performed in step S590. When the first source information is inserted into the first insertion point, adding location information of the first insertion point on the electronic document to object properties of the first image; and After the location information of the first insertion point is added to the object properties, if a command for selecting the first image in the electronic document is applied by the user, the object properties of the first image are referred to and the first insertion point is added. 1 After checking the location information of the insertion point, based on the location information of the first insertion point, checking the first source information inserted at the first insertion point in the electronic document, The method may further include displaying the first source information at a point adjacent to a point where one image is inserted.

이때, 본 발명의 일실시예에 따르면, 상기 전자 단말 장치의 동작 방법은 상기 제1 이미지가 삽입되어 있는 지점의 인접 지점에 상기 제1 출처 정보가 표시된 이후, 상기 사용자에 의해, 상기 제1 출처 정보를 기초로 하여 상기 제1 이미지에 대한 원본 이미지를 검색할 것을 지시하는 원본 이미지 검색 명령이 인가되면, 상기 전자 단말 장치에 사전 설치되어 있는 웹 브라우저를 실행한 후, 사전 지정된 검색 사이트에 접속하여, 상기 제1 출처 정보를 검색어로 한 정보 검색 명령을 실행함으로써, 상기 웹 브라우저 상에서 상기 제1 출처 정보에 대한 검색 결과를 표시하는 단계를 더 포함할 수 있다. At this time, according to an embodiment of the present invention, the operating method of the electronic terminal device may, by the user, after the first source information is displayed at a point adjacent to the point where the first image is inserted, When an original image search command instructing to search for an original image for the first image based on the information is applied, a web browser pre-installed in the electronic terminal device is executed, and then access to a pre-specified search site is obtained. , displaying a search result for the first source information on the web browser by executing an information search command using the first source information as a search term.

또한, 본 발명의 일실시예에 따르면, 상기 출처 정보 데이터베이스 서버에는, 상기 복수의 출처 정보들 각각에, 각 출처 정보가 유료 인용 자료인지 무료 인용 자료인지 여부에 대한 유무료 확인 정보가 추가로 대응되어 저장되어 있을 수 있고, 상기 전자 단말 장치의 동작 방법은 단계(S590)에 의해, 상기 제1 출처 정보가 상기 전자 문서에 삽입되면, 상기 출처 정보 테이터베이스 서버에 접속하여 상기 제1 출처 정보에 대응되는 유무료 확인 정보를 확인함으로써, 상기 제1 출처 정보가 유료 인용 자료인지 무료 인용 자료인지 여부를 확인하는 단계 및 상기 제1 출처 정보가 유료 인용 자료인 것으로 확인되면, 상기 제1 이미지가 유료 인용 자료임을 안내하는 유료 안내 메시지를 화면 상에 표시하는 단계를 더 포함할 수 있다.In addition, according to one embodiment of the present invention, the source information database server additionally corresponds to each of the plurality of source information, paid or free confirmation information about whether each source information is a paid or free quoted material, In step S590, when the first source information is inserted into the electronic document, accessing the source information database server corresponds to the first source information. Checking whether the first source information is paid citation data or free citation data by checking paid and free confirmation information, and if it is confirmed that the first source information is paid citation data, the first image is paid citation data The method may further include displaying on the screen a paid information message informing that the user is charged.

이상, 도 5를 참조하여 본 발명의 일실시예에 따른 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치의 동작 방법에 대해 설명하였다. 여기서, 본 발명의 일실시예에 따른 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치의 동작 방법은 도 1 내지 도 4를 이용하여 설명한 전자 단말 장치(110)의 동작에 대한 구성과 대응될 수 있으므로, 이에 대한 보다 상세한 설명은 생략하기로 한다.In the above, the operating method of the electronic terminal device for automatically inserting source information of an image inserted into an electronic document according to an embodiment of the present invention has been described with reference to FIG. 5 . Here, a method of operating an electronic terminal device for automatically inserting source information of an image inserted into an electronic document according to an embodiment of the present invention relates to the operation of the electronic terminal device 110 described with reference to FIGS. 1 to 4 Since it may correspond to the configuration, a more detailed description thereof will be omitted.

본 발명의 일실시예에 따른 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치의 동작 방법은 컴퓨터와의 결합을 통해 실행시키기 위한 저장매체에 저장된 컴퓨터 프로그램으로 구현될 수 있다.An operating method of an electronic terminal device for automatically inserting source information of an image inserted into an electronic document according to an embodiment of the present invention may be implemented as a computer program stored in a storage medium for execution through combination with a computer.

또한, 본 발명의 일실시예에 따른 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치의 동작 방법은 컴퓨터와의 결합을 통해 실행시키기 위한 컴퓨터 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. In addition, an operating method of an electronic terminal device for automatically inserting source information of an image inserted into an electronic document according to an embodiment of the present invention is implemented in the form of computer program instructions to be executed through combination with a computer and is computer readable. can be recorded on media. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination. Program instructions recorded on the medium may be those specially designed and configured for the present invention or those known and usable to those skilled in computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic media such as floptical disks. - includes hardware devices specially configured to store and execute program instructions, such as magneto-optical media, and ROM, RAM, flash memory, and the like. Examples of program instructions include high-level language codes that can be executed by a computer using an interpreter, as well as machine language codes such as those produced by a compiler.

이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.As described above, the present invention has been described by specific details such as specific components and limited embodiments and drawings, but these are provided to help a more general understanding of the present invention, and the present invention is not limited to the above embodiments. , Those skilled in the art in the field to which the present invention belongs can make various modifications and variations from these descriptions.

따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.Therefore, the spirit of the present invention should not be limited to the described embodiments, and it will be said that not only the claims to be described later, but also all modifications equivalent or equivalent to these claims belong to the scope of the present invention. .

110: 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치
111: 개체명 단어 저장부 112: 연관도 점수 저장부
113: 텍스트 추출부 114: 개체명 단어 선택부
115: 대표 주제어 선정부 116: 명령 전송부
117: 전송 요청부 118: 출처 정보 선택부
119: 출처 정보 삽입부 120: 벡터 생성부
121: 노름 연산부 122: 선정 처리부
123: 위치 정보 추가부 124: 출처 정보 표시부
125: 검색 결과 표시부 126: 정보 확인부
127: 메시지 표시부
130: 사용자
140: 출처 정보 데이터베이스 서버110: Electronic terminal device for automatically inserting source information of an image inserted into an electronic document
111: entity name word storage unit 112: association score storage unit
113: text extraction unit 114: object name word selection unit
115: representative subject word selection unit 116: command transmission unit
117: transmission request unit 118: source information selection unit
119: source information insertion unit 120: vector generation unit
121: norm calculation unit 122: selection processing unit
123: location information addition unit 124: source information display unit
125: search result display unit 126: information confirmation unit
127: message display unit
130: user
140: source information database server

Claims (12)

전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치에 있어서,
사전 설정된 복수의 개체명 단어들이 저장되어 있는 개체명 단어 저장부;
사전 설정된 복수의 주제어들과, 각 주제어별로 사전 지정된 상기 복수의 개체명 단어들 각각과의 연관도 점수 - 상기 연관도 점수가 높을수록 주제어와 개체명 단어 간의 연관도가 높음을 의미함 - 가 대응되어 저장되어 있는 연관도 점수 저장부;
사용자에 의해, 전자 문서에, 텍스트가 포함되어 있는 제1 이미지가 삽입되면, 사전 설정된 텍스트 인식 모델을 기초로, 상기 제1 이미지에 대한 텍스트 인식을 수행하여 상기 제1 이미지에 포함되어 있는 텍스트를 추출하는 텍스트 추출부;
상기 제1 이미지에 포함되어 있는 텍스트가 추출되면, 상기 추출된 텍스트에서 상기 복수의 개체명 단어들이 등장하는지 여부를 확인하여, 상기 추출된 텍스트에서 상기 복수의 개체명 단어들 중 k(k는 자연수임)개의 개체명 단어가 등장하는 것으로 확인되면, 상기 추출된 텍스트로부터 상기 k개의 개체명 단어를 선택하는 개체명 단어 선택부;
상기 추출된 텍스트로부터 상기 k개의 개체명 단어가 선택되면, 상기 연관도 점수 저장부에 저장되어 있는, 상기 복수의 주제어들 각각에 대응되는 상기 k개의 개체명 단어 각각과의 연관도 점수를 기초로, 상기 복수의 주제어들 중 어느 하나의 주제어를 상기 제1 이미지에 대한 대표 주제어로 선정하는 대표 주제어 선정부;
상기 제1 이미지에 대한 대표 주제어가 선정되면, 출처 정보 데이터베이스 서버 - 상기 출처 정보 데이터베이스 서버에는 사전 수집된 복수의 출처 정보들과, 각 출처 정보에 대응되는 연관 키워드들이 서로 대응되어 저장되어 있음 - 에 접속하여, 상기 출처 정보 데이터베이스 서버로, 상기 제1 이미지에 대한 대표 주제어를 전송하면서, 상기 복수의 출처 정보들 중 연관 키워드들 내에 상기 제1 이미지에 대한 대표 주제어가 포함되어 있는 출처 정보를 검색하여 전송할 것을 지시하는 출처 정보 검색 명령을 전송하는 명령 전송부;
상기 출처 정보 데이터베이스 서버에 의해, 상기 복수의 출처 정보들 중 연관 키워드들 내에 상기 제1 이미지에 대한 대표 주제어가 포함된 출처 정보로, 적어도 하나의 출처 정보가 검색됨에 따라, 상기 출처 정보 데이터베이스 서버로부터, 상기 적어도 하나의 출처 정보가 검색되었음을 지시하는 출처 정보 검색 결과가 수신되면, 상기 출처 정보 데이터베이스 서버로, 상기 적어도 하나의 출처 정보와 상기 적어도 하나의 출처 정보 각각에 대응되는 연관 키워드들에 대한 정보의 전송을 요청하는 전송 요청부;
상기 정보 전송 요청에 대응하여, 상기 출처 정보 데이터베이스 서버로부터, 상기 적어도 하나의 출처 정보와 상기 적어도 하나의 출처 정보 각각에 대응되는 연관 키워드들에 대한 정보가 수신되면, 상기 적어도 하나의 출처 정보 각각에 대해, 각 출처 정보에 대응되는 연관 키워드들에 상기 k개의 개체명 단어 중 몇 개의 개체명 단어가 포함되어 있는지 확인하여, 상기 적어도 하나의 출처 정보 중 연관 키워드들 내에 상기 k개의 개체명 단어가 가장 많이 포함되어 있는 제1 출처 정보를, 상기 제1 이미지에 대한 출처 정보로 선택하는 출처 정보 선택부; 및
상기 제1 출처 정보가 상기 제1 이미지에 대한 출처 정보로 선택되면, 상기 제1 출처 정보를 상기 전자 문서에 삽입하는 출처 정보 삽입부
를 포함하는 전자 단말 장치. An electronic terminal device that automatically inserts source information of an image inserted into an electronic document,
an entity name word storage unit in which a plurality of preset entity name words are stored;
Association scores between a plurality of pre-set subject words and each of the plurality of entity words pre-specified for each subject word - the higher the relevance score, the higher the association between the subject word and the entity word - corresponds a relevance score storage unit that has been stored;
When a first image containing text is inserted into an electronic document by a user, text recognition is performed on the first image based on a preset text recognition model to recognize the text included in the first image. a text extraction unit to extract;
When the text included in the first image is extracted, it is checked whether the plurality of entity names appear in the extracted text, and k among the plurality of entity names in the extracted text (k is natural a entity word selection unit selecting the k number of entity name words from the extracted text when it is confirmed that the number of entity name words appear;
When the k entity name words are selected from the extracted text, based on the relevance score stored in the relevance score storage unit with each of the k entity name words corresponding to each of the plurality of subject words , A representative subject word selector selecting one of the plurality of subject words as a representative subject word for the first image;
When a representative subject word for the first image is selected, a source information database server stores a plurality of pre-collected source information and related keywords corresponding to each source information in correspondence with each other in the source information database server. Accessing the source information database server, while transmitting a representative subject word for the first image, searching for source information including a representative subject word for the first image among related keywords among the plurality of source information items a command transmission unit for transmitting a source information search command instructing transmission;
As at least one source information is retrieved by the source information database server as source information including a representative subject word for the first image in related keywords among the plurality of source information items, the source information database server , When a source information search result indicating that the at least one source information has been searched is received, information about the at least one source information and related keywords corresponding to each of the at least one source information is sent to the source information database server. Transmission request unit for requesting transmission of;
In response to the information transmission request, when information about the at least one source information and related keywords corresponding to each of the at least one source information is received from the source information database server, each of the at least one source information , it is checked how many of the k entity name words are included in the related keywords corresponding to each source information, and the k entity name words among the related keywords among the at least one source information are the most a source information selecting unit that selects a large amount of first source information as source information for the first image; and
If the first source information is selected as the source information for the first image, a source information insertion unit for inserting the first source information into the electronic document.
Electronic terminal device comprising a. 제1항에 있어서,
상기 대표 주제어 선정부는
상기 k개의 개체명 단어가 선택되면, 상기 연관도 점수 저장부를 참조하여, 상기 복수의 주제어들 각각에 대해, 각 주제어에 대응되는 상기 k개의 개체명 단어 각각과의 연관도 점수를 성분으로 갖는 k차원의 벡터를 생성함으로써, 상기 복수의 주제어들 각각에 대응되는 연관도 벡터를 생성하는 벡터 생성부;
상기 복수의 주제어들 각각에 대응되는 연관도 벡터의 유클리드 노름(Euclidean norm)을 연산하는 노름 연산부; 및
상기 복수의 주제어들 중 상기 유클리드 노름이 최대인 주제어를 상기 제1 이미지에 대한 대표 주제어로 선정하는 선정 처리부
를 포함하는 전자 단말 장치. According to claim 1,
The representative subject word selection section
When the k entity name words are selected, with reference to the relevance score storage unit, for each of the plurality of subject words, k having as a component a relevance score with each of the k entity name words corresponding to each subject word. a vector generator for generating an association vector corresponding to each of the plurality of subject words by generating a dimensional vector;
a norm calculation unit calculating a Euclidean norm of a degree of association vector corresponding to each of the plurality of subject terms; and
A selection processor selecting a subject word having the largest Euclidean norm among the plurality of subject words as a representative subject word for the first image.
Electronic terminal device comprising a. 제1항에 있어서,
상기 출처 정보 삽입부는
상기 제1 출처 정보가 상기 제1 이미지에 대한 출처 정보로 선택되면, 상기 전자 문서에서 이미 생성 완료된 출처 정보들이 존재하는지 확인하여, 상기 전자 문서에서 상기 제1 출처 정보가 생성된 누적 순번을 확인한 후 상기 전자 문서의 마지막 페이지에 사전 설정되어 있는 복수의 출처 정보 삽입 지점들 - 상기 복수의 출처 정보 삽입 지점들 각각에는 서로 다른 삽입 순번이 사전 할당되어 있음 - 중, 상기 확인된 누적 순번에 대응되는 삽입 순번이 할당되어 있는 제1 삽입 지점에 상기 제1 출처 정보를 삽입하고,
상기 전자 단말 장치는
상기 출처 정보 삽입부에 의해, 상기 제1 삽입 지점에 상기 제1 출처 정보가 삽입되면, 상기 제1 이미지에 대한 개체 속성에 상기 제1 삽입 지점의 상기 전자 문서 상에서의 위치 정보를 추가하는 위치 정보 추가부; 및
상기 제1 이미지에 대한 개체 속성에 상기 제1 삽입 지점의 위치 정보가 추가된 이후, 상기 사용자에 의해, 상기 전자 문서에서 상기 제1 이미지에 대한 선택 명령이 인가되면, 상기 제1 이미지에 대한 개체 속성을 참조하여 상기 제1 삽입 지점의 위치 정보를 확인한 후 상기 제1 삽입 지점의 위치 정보를 기초로, 상기 전자 문서 상에서의 상기 제1 삽입 지점에 삽입되어 있는 상기 제1 출처 정보를 확인하여, 상기 전자 문서 상에서 상기 제1 이미지가 삽입되어 있는 지점의 인접 지점에 상기 제1 출처 정보를 표시하는 출처 정보 표시부
를 더 포함하는 전자 단말 장치. According to claim 1,
The source information insertion section
When the first source information is selected as the source information for the first image, it is checked whether source information that has already been created exists in the electronic document, and the cumulative order in which the first source information is generated in the electronic document is checked. Among a plurality of source information insertion points preset in the last page of the electronic document - different insertion order numbers are preassigned to each of the plurality of source information insertion points - insertion corresponding to the confirmed cumulative order inserting the first source information at a first insertion point to which a sequence number is assigned;
The electronic terminal device
When the first source information is inserted into the first insertion point by the source information inserter, location information for adding location information of the first insertion point on the electronic document to object properties of the first image. addition; and
If a command to select the first image in the electronic document is applied by the user after the location information of the first insertion point is added to the object properties of the first image, the object for the first image After confirming location information of the first insertion point by referring to properties, based on the location information of the first insertion point, checking the first source information inserted into the first insertion point on the electronic document; A source information display unit for displaying the first source information at a point adjacent to a point where the first image is inserted on the electronic document.
Electronic terminal device further comprising a. 제3항에 있어서,
상기 제1 이미지가 삽입되어 있는 지점의 인접 지점에 상기 제1 출처 정보가 표시된 이후, 상기 사용자에 의해, 상기 제1 출처 정보를 기초로 하여 상기 제1 이미지에 대한 원본 이미지를 검색할 것을 지시하는 원본 이미지 검색 명령이 인가되면, 상기 전자 단말 장치에 사전 설치되어 있는 웹 브라우저를 실행한 후, 사전 지정된 검색 사이트에 접속하여, 상기 제1 출처 정보를 검색어로 한 정보 검색 명령을 실행함으로써, 상기 웹 브라우저 상에서 상기 제1 출처 정보에 대한 검색 결과를 표시하는 검색 결과 표시부
를 더 포함하는 전자 단말 장치. According to claim 3,
Instructing the user to search for an original image of the first image based on the first source information after the first source information is displayed at a point adjacent to the point where the first image is inserted. When an original image search command is applied, a web browser pre-installed in the electronic terminal device is executed, accesses a pre-specified search site, and an information search command is executed using the first source information as a search term, thereby executing the web browser. A search result display unit for displaying a search result for the first source information on a browser
Electronic terminal device further comprising a. 제1항에 있어서,
상기 출처 정보 데이터베이스 서버에는, 상기 복수의 출처 정보들 각각에, 각 출처 정보가 유료 인용 자료인지 무료 인용 자료인지 여부에 대한 유무료 확인 정보가 추가로 대응되어 저장되어 있고,
상기 전자 단말 장치는
상기 출처 정보 삽입부에 의해, 상기 제1 출처 정보가 상기 전자 문서에 삽입되면, 상기 출처 정보 데이터베이스 서버에 접속하여 상기 제1 출처 정보에 대응되는 유무료 확인 정보를 확인함으로써, 상기 제1 출처 정보가 유료 인용 자료인지 무료 인용 자료인지 여부를 확인하는 정보 확인부; 및
상기 제1 출처 정보가 유료 인용 자료인 것으로 확인되면, 상기 제1 이미지가 유료 인용 자료임을 안내하는 유료 안내 메시지를 화면 상에 표시하는 메시지 표시부
를 더 포함하는 전자 단말 장치. According to claim 1,
In the source information database server, paid and free confirmation information regarding whether each source information is paid or free quoted data is additionally stored in correspondence with each of the plurality of source information,
The electronic terminal device
When the first source information is inserted into the electronic document by the source information insertion unit, by accessing the source information database server and checking paid or free verification information corresponding to the first source information, the first source information is an information confirmation unit that checks whether the data is paid or free; and
If it is confirmed that the first source information is paid citation material, a message display unit for displaying a paid information message on the screen informing that the first image is paid citation material.
Electronic terminal device further comprising a. 전자 문서에 삽입된 이미지의 출처 정보를 자동으로 삽입하는 전자 단말 장치의 동작 방법에 있어서,
사전 설정된 복수의 개체명 단어들이 저장되어 있는 개체명 단어 저장부를 유지하는 단계;
사전 설정된 복수의 주제어들과, 각 주제어별로 사전 지정된 상기 복수의 개체명 단어들 각각과의 연관도 점수 - 상기 연관도 점수가 높을수록 주제어와 개체명 단어 간의 연관도가 높음을 의미함 - 가 대응되어 저장되어 있는 연관도 점수 저장부를 유지하는 단계;
사용자에 의해, 전자 문서에, 텍스트가 포함되어 있는 제1 이미지가 삽입되면, 사전 설정된 텍스트 인식 모델을 기초로, 상기 제1 이미지에 대한 텍스트 인식을 수행하여 상기 제1 이미지에 포함되어 있는 텍스트를 추출하는 단계;
상기 제1 이미지에 포함되어 있는 텍스트가 추출되면, 상기 추출된 텍스트에서 상기 복수의 개체명 단어들이 등장하는지 여부를 확인하여, 상기 추출된 텍스트에서 상기 복수의 개체명 단어들 중 k(k는 자연수임)개의 개체명 단어가 등장하는 것으로 확인되면, 상기 추출된 텍스트로부터 상기 k개의 개체명 단어를 선택하는 단계;
상기 추출된 텍스트로부터 상기 k개의 개체명 단어가 선택되면, 상기 연관도 점수 저장부에 저장되어 있는, 상기 복수의 주제어들 각각에 대응되는 상기 k개의 개체명 단어 각각과의 연관도 점수를 기초로, 상기 복수의 주제어들 중 어느 하나의 주제어를 상기 제1 이미지에 대한 대표 주제어로 선정하는 단계;
상기 제1 이미지에 대한 대표 주제어가 선정되면, 출처 정보 데이터베이스 서버 - 상기 출처 정보 데이터베이스 서버에는 사전 수집된 복수의 출처 정보들과, 각 출처 정보에 대응되는 연관 키워드들이 서로 대응되어 저장되어 있음 - 에 접속하여, 상기 출처 정보 데이터베이스 서버로, 상기 제1 이미지에 대한 대표 주제어를 전송하면서, 상기 복수의 출처 정보들 중 연관 키워드들 내에 상기 제1 이미지에 대한 대표 주제어가 포함되어 있는 출처 정보를 검색하여 전송할 것을 지시하는 출처 정보 검색 명령을 전송하는 단계;
상기 출처 정보 데이터베이스 서버에 의해, 상기 복수의 출처 정보들 중 연관 키워드들 내에 상기 제1 이미지에 대한 대표 주제어가 포함된 출처 정보로, 적어도 하나의 출처 정보가 검색됨에 따라, 상기 출처 정보 데이터베이스 서버로부터, 상기 적어도 하나의 출처 정보가 검색되었음을 지시하는 출처 정보 검색 결과가 수신되면, 상기 출처 정보 데이터베이스 서버로, 상기 적어도 하나의 출처 정보와 상기 적어도 하나의 출처 정보 각각에 대응되는 연관 키워드들에 대한 정보의 전송을 요청하는 단계;
상기 정보 전송 요청에 대응하여, 상기 출처 정보 데이터베이스 서버로부터, 상기 적어도 하나의 출처 정보와 상기 적어도 하나의 출처 정보 각각에 대응되는 연관 키워드들에 대한 정보가 수신되면, 상기 적어도 하나의 출처 정보 각각에 대해, 각 출처 정보에 대응되는 연관 키워드들에 상기 k개의 개체명 단어 중 몇 개의 개체명 단어가 포함되어 있는지 확인하여, 상기 적어도 하나의 출처 정보 중 연관 키워드들 내에 상기 k개의 개체명 단어가 가장 많이 포함되어 있는 제1 출처 정보를, 상기 제1 이미지에 대한 출처 정보로 선택하는 단계; 및
상기 제1 출처 정보가 상기 제1 이미지에 대한 출처 정보로 선택되면, 상기 제1 출처 정보를 상기 전자 문서에 삽입하는 단계
를 포함하는 전자 단말 장치의 동작 방법. A method of operating an electronic terminal device that automatically inserts source information of an image inserted into an electronic document,
maintaining a named entity word storage unit in which a plurality of preset named entity words are stored;
Association scores between a plurality of pre-set subject words and each of the plurality of entity words pre-specified for each subject word - the higher the relevance score, the higher the association between the subject word and the entity word - corresponds maintaining a relevance score storage unit that has been stored;
When a first image containing text is inserted into an electronic document by a user, text recognition is performed on the first image based on a preset text recognition model to recognize the text included in the first image. extracting;
When the text included in the first image is extracted, it is checked whether the plurality of entity names appear in the extracted text, and k among the plurality of entity names in the extracted text (k is natural selecting the k number of entity name words from the extracted text when it is confirmed that the number of entity name words appear;
When the k entity name words are selected from the extracted text, based on the relevance score stored in the relevance score storage unit with each of the k entity name words corresponding to each of the plurality of subject words , selecting one of the plurality of subject words as a representative subject word for the first image;
When a representative subject word for the first image is selected, a source information database server stores a plurality of pre-collected source information and related keywords corresponding to each source information in correspondence with each other in the source information database server. Accessing the source information database server, while transmitting a representative subject word for the first image, searching for source information including a representative subject word for the first image among related keywords among the plurality of source information items transmitting a source information search command instructing transmission;
As at least one source information is retrieved by the source information database server as source information including a representative subject word for the first image in related keywords among the plurality of source information items, the source information database server , When a source information search result indicating that the at least one source information has been searched is received, information about the at least one source information and related keywords corresponding to each of the at least one source information is sent to the source information database server. requesting transmission of;
In response to the information transmission request, when information on the at least one source information and related keywords corresponding to each of the at least one source information is received from the source information database server, each of the at least one source information , it is checked how many of the k entity name words are included in the related keywords corresponding to each source information, and the k entity name words are the most selecting first source information included in a large amount as source information for the first image; and
inserting the first source information into the electronic document when the first source information is selected as the source information for the first image;
A method of operating an electronic terminal device comprising a. 제6항에 있어서,
상기 제1 이미지에 대한 대표 주제어로 선정하는 단계는
상기 k개의 개체명 단어가 선택되면, 상기 연관도 점수 저장부를 참조하여, 상기 복수의 주제어들 각각에 대해, 각 주제어에 대응되는 상기 k개의 개체명 단어 각각과의 연관도 점수를 성분으로 갖는 k차원의 벡터를 생성함으로써, 상기 복수의 주제어들 각각에 대응되는 연관도 벡터를 생성하는 단계;
상기 복수의 주제어들 각각에 대응되는 연관도 벡터의 유클리드 노름(Euclidean norm)을 연산하는 단계; 및
상기 복수의 주제어들 중 상기 유클리드 노름이 최대인 주제어를 상기 제1 이미지에 대한 대표 주제어로 선정하는 단계
를 포함하는 전자 단말 장치의 동작 방법. According to claim 6,
The step of selecting a representative theme for the first image
When the k entity name words are selected, with reference to the relevance score storage unit, for each of the plurality of subject words, k having as a component a relevance score with each of the k entity name words corresponding to each subject word. generating a degree of association vector corresponding to each of the plurality of subject words by generating a dimensional vector;
calculating a Euclidean norm of a degree of association vector corresponding to each of the plurality of subject terms; and
selecting a subject word having the largest Euclidean norm among the plurality of subject words as a representative subject word for the first image;
A method of operating an electronic terminal device comprising a. 제6항에 있어서,
상기 제1 출처 정보를 상기 전자 문서에 삽입하는 단계는
상기 제1 출처 정보가 상기 제1 이미지에 대한 출처 정보로 선택되면, 상기 전자 문서에서 이미 생성 완료된 출처 정보들이 존재하는지 확인하여, 상기 전자 문서에서 상기 제1 출처 정보가 생성된 누적 순번을 확인한 후 상기 전자 문서의 마지막 페이지에 사전 설정되어 있는 복수의 출처 정보 삽입 지점들 - 상기 복수의 출처 정보 삽입 지점들 각각에는 서로 다른 삽입 순번이 사전 할당되어 있음 - 중, 상기 확인된 누적 순번에 대응되는 삽입 순번이 할당되어 있는 제1 삽입 지점에 상기 제1 출처 정보를 삽입하고,
상기 전자 단말 장치의 동작 방법은
상기 제1 출처 정보를 상기 전자 문서에 삽입하는 단계에 의해, 상기 제1 삽입 지점에 상기 제1 출처 정보가 삽입되면, 상기 제1 이미지에 대한 개체 속성에 상기 제1 삽입 지점의 상기 전자 문서 상에서의 위치 정보를 추가하는 단계; 및
상기 제1 이미지에 대한 개체 속성에 상기 제1 삽입 지점의 위치 정보가 추가된 이후, 상기 사용자에 의해, 상기 전자 문서에서 상기 제1 이미지에 대한 선택 명령이 인가되면, 상기 제1 이미지에 대한 개체 속성을 참조하여 상기 제1 삽입 지점의 위치 정보를 확인한 후 상기 제1 삽입 지점의 위치 정보를 기초로, 상기 전자 문서 상에서의 상기 제1 삽입 지점에 삽입되어 있는 상기 제1 출처 정보를 확인하여, 상기 전자 문서 상에서 상기 제1 이미지가 삽입되어 있는 지점의 인접 지점에 상기 제1 출처 정보를 표시하는 단계
를 더 포함하는 전자 단말 장치의 동작 방법. According to claim 6,
Inserting the first source information into the electronic document
When the first source information is selected as the source information for the first image, it is checked whether source information that has already been created exists in the electronic document, and the cumulative order in which the first source information is generated in the electronic document is checked. Among a plurality of source information insertion points preset in the last page of the electronic document - different insertion order numbers are preassigned to each of the plurality of source information insertion points - insertion corresponding to the confirmed cumulative order inserting the first source information at a first insertion point to which a sequence number is assigned;
A method of operating the electronic terminal device
In the step of inserting the first source information into the electronic document, if the first source information is inserted into the first insertion point, the object property of the first image is added to the electronic document of the first insertion point. Adding location information of; and
If a command to select the first image in the electronic document is applied by the user after the location information of the first insertion point is added to the object properties of the first image, the object for the first image After confirming location information of the first insertion point by referring to properties, based on the location information of the first insertion point, checking the first source information inserted into the first insertion point on the electronic document; displaying the first source information at a point adjacent to a point where the first image is inserted on the electronic document;
Method of operating an electronic terminal device further comprising a. 제8항에 있어서,
상기 제1 이미지가 삽입되어 있는 지점의 인접 지점에 상기 제1 출처 정보가 표시된 이후, 상기 사용자에 의해, 상기 제1 출처 정보를 기초로 하여 상기 제1 이미지에 대한 원본 이미지를 검색할 것을 지시하는 원본 이미지 검색 명령이 인가되면, 상기 전자 단말 장치에 사전 설치되어 있는 웹 브라우저를 실행한 후, 사전 지정된 검색 사이트에 접속하여, 상기 제1 출처 정보를 검색어로 한 정보 검색 명령을 실행함으로써, 상기 웹 브라우저 상에서 상기 제1 출처 정보에 대한 검색 결과를 표시하는 단계
를 더 포함하는 전자 단말 장치의 동작 방법.According to claim 8,
Instructing the user to search for an original image of the first image based on the first source information after the first source information is displayed at a point adjacent to the point where the first image is inserted. When an original image search command is applied, a web browser pre-installed in the electronic terminal device is executed, accesses a pre-specified search site, and an information search command is executed using the first source information as a search term, thereby executing the web browser. displaying a search result for the first source information on a browser;
Method of operating an electronic terminal device further comprising a. 제6항에 있어서,
상기 출처 정보 데이터베이스 서버에는, 상기 복수의 출처 정보들 각각에, 각 출처 정보가 유료 인용 자료인지 무료 인용 자료인지 여부에 대한 유무료 확인 정보가 추가로 대응되어 저장되어 있고,
상기 전자 단말 장치의 동작 방법은
상기 제1 출처 정보를 상기 전자 문서에 삽입하는 단계에 의해, 상기 제1 출처 정보가 상기 전자 문서에 삽입되면, 상기 출처 정보 데이터베이스 서버에 접속하여 상기 제1 출처 정보에 대응되는 유무료 확인 정보를 확인함으로써, 상기 제1 출처 정보가 유료 인용 자료인지 무료 인용 자료인지 여부를 확인하는 단계; 및
상기 제1 출처 정보가 유료 인용 자료인 것으로 확인되면, 상기 제1 이미지가 유료 인용 자료임을 안내하는 유료 안내 메시지를 화면 상에 표시하는 단계
를 더 포함하는 전자 단말 장치의 동작 방법. According to claim 6,
In the source information database server, paid and free confirmation information regarding whether each source information is paid or free quoted data is additionally stored in correspondence with each of the plurality of source information,
A method of operating the electronic terminal device
In the step of inserting the first source information into the electronic document, when the first source information is inserted into the electronic document, the source information database server is accessed and paid or free verification information corresponding to the first source information is checked. checking whether the first source information is paid citation data or free citation data; and
If it is confirmed that the first source information is paid citation material, displaying a paid information message on the screen informing that the first image is paid citation material.
Method of operating an electronic terminal device further comprising a. 제6항 내지 제10항 중 어느 한 항의 방법을 컴퓨터와의 결합을 통해 실행시키기 위한 컴퓨터 프로그램을 기록한 컴퓨터 판독 가능 기록 매체.A computer-readable recording medium recording a computer program for executing the method of any one of claims 6 to 10 through a combination with a computer. 제6항 내지 제10항 중 어느 한 항의 방법을 컴퓨터와의 결합을 통해 실행시키기 위한 저장매체에 저장된 컴퓨터 프로그램.A computer program stored in a storage medium for executing the method of any one of claims 6 to 10 through a combination with a computer.
KR1020210066705A 2021-05-25 2021-05-25 Electronic terminal apparatus which inserts source information of the image inserted into an electronic document, and the operating method thereof KR102566921B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210066705A KR102566921B1 (en) 2021-05-25 2021-05-25 Electronic terminal apparatus which inserts source information of the image inserted into an electronic document, and the operating method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210066705A KR102566921B1 (en) 2021-05-25 2021-05-25 Electronic terminal apparatus which inserts source information of the image inserted into an electronic document, and the operating method thereof

Publications (2)

Publication Number Publication Date
KR20220158990A KR20220158990A (en) 2022-12-02
KR102566921B1 true KR102566921B1 (en) 2023-08-14

Family

ID=84413097

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210066705A KR102566921B1 (en) 2021-05-25 2021-05-25 Electronic terminal apparatus which inserts source information of the image inserted into an electronic document, and the operating method thereof

Country Status (1)

Country Link
KR (1) KR102566921B1 (en)

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100857381B1 (en) * 2006-12-26 2008-09-05 엔에이치엔(주) Contents service system and method

Also Published As

Publication number Publication date
KR20220158990A (en) 2022-12-02

Similar Documents

Publication Publication Date Title
US10949744B2 (en) Recurrent neural network architectures which provide text describing images
JP5353148B2 (en) Image information retrieving apparatus, image information retrieving method and computer program therefor
US8577882B2 (en) Method and system for searching multilingual documents
US10592571B1 (en) Query modification based on non-textual resource context
US20140075393A1 (en) Gesture-Based Search Queries
JP2013541793A (en) Multi-mode search query input method
CN107085583B (en) Electronic document management method and device based on content
JP2010073114A6 (en) Image information retrieving apparatus, image information retrieving method and computer program therefor
US20050154702A1 (en) Computer aided authoring, electronic document browsing, retrieving, and subscribing and publishing
Heller et al. Interactive multimodal lifelog retrieval with Vitrivr at LSC 2021
CN111444387A (en) Video classification method and device, computer equipment and storage medium
CN111666383A (en) Information processing method, information processing device, electronic equipment and computer readable storage medium
KR102566921B1 (en) Electronic terminal apparatus which inserts source information of the image inserted into an electronic document, and the operating method thereof
CN116755688A (en) Component processing method, device, computer equipment and storage medium
CN112883218A (en) Image-text combined representation searching method, system, server and storage medium
Masuda et al. Video scene retrieval using online video annotation
KR102215580B1 (en) Electronic device for selecting important keywords for documents based on style attributes and operating method thereof
US11720626B1 (en) Image keywords
US10380167B1 (en) Multi-volume content mapping
CN111259180B (en) Image pushing method, device, electronic equipment and storage medium
TW200828039A (en) List displaying method for web page searching result
CN114238689A (en) Video generation method, video generation device, electronic device, storage medium, and program product
KR20210115670A (en) Electronic device that supports retrieval of objects from document by matching objects and keywords inserted into document and operating method thereof
CN112257408A (en) Text comparison method and related device
KR20120072153A (en) System for generating and searching documents of minutes

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant