KR20150009106A - 요약 데이터를 생성하는 서버 및 방법, 그리고 시스템 - Google Patents
요약 데이터를 생성하는 서버 및 방법, 그리고 시스템 Download PDFInfo
- Publication number
- KR20150009106A KR20150009106A KR20130082928A KR20130082928A KR20150009106A KR 20150009106 A KR20150009106 A KR 20150009106A KR 20130082928 A KR20130082928 A KR 20130082928A KR 20130082928 A KR20130082928 A KR 20130082928A KR 20150009106 A KR20150009106 A KR 20150009106A
- Authority
- KR
- South Korea
- Prior art keywords
- image
- data
- output
- summary data
- indicator
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 28
- 238000010191 image analysis Methods 0.000 claims abstract description 22
- 230000005540 biological transmission Effects 0.000 claims description 4
- 239000000284 extract Substances 0.000 abstract description 11
- 238000004458 analytical method Methods 0.000 abstract 1
- 238000000605 extraction Methods 0.000 description 19
- 230000000875 corresponding effect Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 7
- 238000012545 processing Methods 0.000 description 4
- 238000012546 transfer Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001276 controlling effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007723 transport mechanism Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/14—Image acquisition
- G06V30/148—Segmentation of character regions
- G06V30/153—Segmentation of character regions using recognition of characters or words
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Tourism & Hospitality (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Economics (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
요약 데이터를 생성하는 서버는 영상 출력 장치로 출력 데이터를 전송하는 출력 데이터 전송부, 영상 수집 장치로부터, 영상 출력 장치에 의해 출력된 영상과 출력된 영상 상에 표시된 지시자의 캡쳐 영상을 수신하는 캡쳐 영상 수신부, 캡쳐 영상에 대한 영상 분석을 통해, 지시자가 표시된 영역에 해당하는 단어를 추출하고, 출력 데이터 내에서 지시자가 표시된 데이터 위치 및 지시자가 표시된 시간 정보 중 하나 이상을 분석하는 영상 분석부 및 분석된 데이터 위치 및 시간 정보 중 하나 이상과 추출된 단어를 기초로 출력 데이터에 대한 요약 데이터를 생성하는 요약 데이터 생성부를 포함한다.
Description
본 발명은 요약 데이터를 생성하는 서버 및 방법, 그리고 시스템에 관한 것이다.
프리젠테이션 자료는 각종 발표 시 사용하는 문서 자료로서, 일반적인 대화 또는 강연 연설에서 청중들의 이해를 돕기 위해 많이 이용되고 있다. 빔 프로젝터를 통해 프리젠테이션을 하는 경우, 발표자는 레이저 포인터를 이용하여 스크린에 레이저 빔을 조사하여 설명을 강조하는 경우가 많다.
최근에는 레이저 포인터를 통해 스크린에 레이저 빔을 조사하면, 레이저 빔이 조사된 위치에 선 또는 도형을 스크린 상에 표시하여 설명을 강조할 수 있게 하는 기술이 개발되었다. 이러한 프리젠테이션 시스템과 관련하여, 선행기술인 한국등록특허 제 10-1258910에서는 프리젠테이션 시스템에서 레이저 포인터를 이용한 영상 판서 방법을 개시하고 있다.
다만, 발표자가 프리젠테이션 시, 청중들은 프리젠테이션에서 중요하다고 생각되는 부분을 직접 메모 또는 워드 타이핑을(Word Typing)을 통해 수동적으로 기록할 수 밖에 없었다. 또한, 청중의 메모 작성 속도가 느리거나 발표자의 발표 속도가 빠르면 프리젠테이션의 중요 부분을 놓치는 경우가 있다. 따라서, 발표 상황을 저장하여 프리젠테이션이 종료된 후에도 확인할 수 있는 방법이 요구되고 있다.
프리젠테이션시 발생하는 정보와 클라우드 또는 디지털 저장 공간에 있는 프리젠테이션 자료의 정보를 결합하여 효율적인 프리젠테이션 요약 데이터를 제공하는 요약 데이터 생성 서버 및 방법을 제공하고자 한다. 프리젠테이션이 종료 된 후, 실제 발생한 정보를 이용하여 부가적인 디지털 문서를 자동 생성하는 요약 데이터 생성 서버 및 방법을 제공하고자 한다. 다만, 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.
상술한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 일 실시예는 영상 출력 장치로 출력 데이터를 전송하는 출력 데이터 전송부, 영상 수집 장치로부터, 영상 출력 장치에 의해 출력된 영상과 출력된 영상 상에 표시된 지시자의 캡쳐 영상을 수신하는 캡쳐 영상 수신부, 캡쳐 영상에 대한 영상 분석을 통해, 지시자가 표시된 영역에 해당하는 단어를 추출하고, 출력 데이터 내에서 지시자가 표시된 데이터 위치 및 지시자가 표시된 시간 정보 중 하나 이상을 분석하는 영상 분석부 및 분석된 데이터 위치 및 시간 정보 중 하나 이상과 추출된 단어를 기초로 출력 데이터에 대한 요약 데이터를 생성하는 요약 데이터 생성부를 포함하는 요약 데이터 생성 서버를 제공할 수 있다.
또한, 본 발명의 다른 실시예는, 서버로부터 전송된 출력 데이터의 영상을 출력하는 영상 출력 장치, 출력된 영상과 출력된 영상 상에 표시된 지시자의 캡쳐 영상을 서버로 전송하는 영상 수집 장치 및 캡쳐 영상에 대한 영상 분석을 통해, 지시자가 표시된 영역에 해당하는 단어를 추출하고, 출력 데이터 내에서 지시자가 표시된 데이터 위치 및 지시자가 표시된 시간 정보 중 하나 이상을 분석하고, 분석된 데이터 위치 및 시간 정보 중 하나 이상과 추출된 단어를 기초로 출력 데이터에 대한 요약 데이터를 생성하는 서버를 포함하는 요약 데이터 생성 시스템을 제공할 수 있다.
또한, 본 발명의 또 다른 실시예는, 영상 출력 장치로 출력 데이터를 전송하는 단계, 영상 수집 장치로부터, 영상 출력 장치에 의해 출력된 영상과 출력된 영상 상에 표시된 지시자의 캡쳐 영상을 수신하는 단계, 캡쳐 영상에 대한 영상 분석을 통해, 지시자가 표시된 영역에 해당하는 단어를 추출하고, 출력 데이터 내에서 지시자가 표시된 데이터 위치 및 지시자가 표시된 시간 정보 중 하나 이상을 분석하는 단계 및 분석된 데이터 위치 및 시간 정보 중 하나 이상과 추출된 단어를 기초로 출력 데이터에 대한 요약 데이터를 생성하는 단계를 포함하는 요약 데이터 생성 방법을 제공할 수 있다.
전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, 프리젠테이션시 발생하는 정보와 클라우드 또는 디지털 저장 공간에 있는 프리젠테이션 자료의 정보를 결합하여 효율적인 프리젠테이션 요약 데이터를 제공하는 요약 데이터 생성 서버 및 방법을 제공할 수 있다. 프리젠테이션이 종료 된 후, 실제 발생한 정보를 이용하여 부가적인 디지털 문서를 자동 생성하는 요약 데이터 생성 서버 및 방법을 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 요약 데이터 생성 시스템의 구성도이다.
도 2는 도 1에 도시된 요약 데이터 생성 서버의 구성도의 일 예이다.
도 3은 캡쳐 영상 내의 단어에 지시자가 표시된 화면을 도시한 것이다.
도 4는 본 발명의 일 실시예에 따른 캡쳐 영상으로부터 지시자가 표시된 단어를 추출하여 데이터베이스에 저장하는 과정을 나타낸 흐름도이다.
도 5a 내지 도 5b는 본 발명의 일 실시예에 따른 단어별 추출 횟수와 추출된 단어 간의 연관 관계를 나타낸 도면이다.
도 6은 본 발명의 일 실시예에 따른 요약 데이터 생성 방법을 나타낸 흐름도이다.
도 2는 도 1에 도시된 요약 데이터 생성 서버의 구성도의 일 예이다.
도 3은 캡쳐 영상 내의 단어에 지시자가 표시된 화면을 도시한 것이다.
도 4는 본 발명의 일 실시예에 따른 캡쳐 영상으로부터 지시자가 표시된 단어를 추출하여 데이터베이스에 저장하는 과정을 나타낸 흐름도이다.
도 5a 내지 도 5b는 본 발명의 일 실시예에 따른 단어별 추출 횟수와 추출된 단어 간의 연관 관계를 나타낸 도면이다.
도 6은 본 발명의 일 실시예에 따른 요약 데이터 생성 방법을 나타낸 흐름도이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미하며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하 첨부된 도면을 참고하여 본 발명의 일 실시예를 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 요약 데이터 생성 시스템(1)의 구성도이다. 도 1을 참조하면, 요약 데이터 생성 시스템(1)은 영상 출력 장치(10), 영상 수집 장치(20) 및 요약 데이터 생성 서버(30)를 포함할 수 있다. 이 때, 도 1 에 도시된 영상 출력 장치(10), 영상 수집 장치(20) 및 요약 데이터 생성 서버(30)는 요약 데이터 생성 시스템(1)에 의하여 제어될 수 있는 구성요소들을 예시적으로 도시한 것이다.
도 1의 요약 데이터 생성 시스템(1)의 각 구성요소들은 일반적으로 네트워크(network)를 통해 연결된다. 예를 들어, 도 1에 도시된 바와 같이, 요약 데이터 생성 서버(30)는 네트워크를 통하여 영상 출력 장치(10) 및 영상 수집 장치(20)와 연결될 수 있다.
네트워크는 단말들 및 서버들과 같은 각각의 노드 상호 간에 정보 교환이 가능한 연결 구조를 의미하는 것으로, 이러한 네트워크의 일 예는, Wi-Fi, 인터넷(Internet), LAN(Local Area Network), Wireless LAN(Wireless Local Area Network), WAN(Wide Area Network), PAN(Personal Area Network), 3G, 4G, LTE 등이 포함되나 이에 한정되지는 않는다.
영상 출력 장치(10)는 요약 데이터 생성 서버(30)로부터 전송된 출력 데이터의 영상을 출력한다. 이 때, 출력 데이터는 전자 문서의 사본일 수 있다. 또한, 영상 출력 장치(10)는 요약 데이터 생성 서버(30)로부터 요약 데이터 생성 서버(30)에 의해 생성된 요약 데이터를 수신할 수 있다. 이 때, 요약 데이터는 출력 데이터에 대한 요약 데이터로서, 요약 데이터 생성 서버(30)에서 분석된 데이터 위치 및 시간 정보 중 하나 이상을 기초로 생성될 수 있다. 이러한 영상 출력 장치(10)는 전자 문서를 출력할 수 있는 장치로서, 예를 들어, 빔 프로젝터(Beam Projector), 모든 종류의 TV, 모니터, 터치스크린, 셋탑박스, PC 등을 포함할 수 있다.
영상 수집 장치(20)는 영상 출력 장치(10)에서 출력된 영상과 출력된 영상 상에 표시된 지시자의 캡쳐 영상을 요약 데이터 생성 서버(30)로 전송한다. 이 때, 영상 수집 장치(20)는 영상 출력 장치(10)에서 출력된 영상과 출력된 영상 상에 표시된 지시자를 캡쳐할 수 있는 장치로서, 예를 들어, 카메라, 이미지 캡쳐 보드, 이미지 센서 등을 포함할 수 있다.
이 때, 영상 출력 장치(10)와 영상 수집 장치(20)는 각각 별개의 장치로 구성될 수도 있으며, 하나의 장치로 결합되어 구성될 수도 있다.
요약 데이터 생성 서버(30)는 출력 데이터로서 각종의 전자 문서 등을 저장하고 있다가, 영상 출력 장치(10)의 요청에 의해 출력 데이터의 사본을 전송해줄 수 있다. 또한, 영상 수집 장치(20)로부터 수신한 캡쳐 영상에 대한 영상 분석을 통해, 지시자가 표시된 영역에 해당하는 단어를 추출한다.
요약 데이터 생성 서버(30)는 출력 데이터 내에서 지시자가 표시된 데이터 위치 및 지시자가 표시된 시간 정보 중 하나 이상을 분석한다. 이 때, 요약 데이터 생성 서버(30)는 캡쳐 영상에 대한 문자 인식, 숫자 인식, 이미지 검색 중 하나 이상을 통해 출력 데이터 내에서 지시자가 표시된 위치를 분석할 수 있다.
요약 데이터 생성 서버(30)는 분석된 데이터 위치 및 시간 정보 중 하나 이상과 추출된 단어를 기초로 출력 데이터에 대한 요약 데이터를 생성할 수 있다. 이 때, 요약 데이터 생성 서버(30)는 추출된 단어가 반복하여 추출된 횟수를 기초로, 추출된 단어를 요약 데이터 내에서 강조하여 표시할 수 있다. 예를 들어, 요약 데이터 생성 서버(30)는 추출된 단어를 요약 데이터 내에서 강조하기 위해 선, 도형 중 적어도 어느 하나 이상을 표시할 수 있다. 다른 예를 들어, 요약 데이터 생성 서버(30)는 추출된 단어를 요약 데이터 내에서 강조하여 표시하기 위해 같은 단어가 반복하여 추출된 횟수를 기초로, 추출된 단어의 크기를 확대하여 표시할 수 있다.
또한, 요약 데이터 생성 서버(30)는 분석된 데이터 위치를 기초로, 추출된 단어 간의 연관 관계를 요약 데이터 내에서 표시할 수 있다. 이 때, 분석된 데이터 위치는 전자 문서 내에서의 페이지 번호(예를 들어, 30 page)일 수 있다. 또한, 요약 데이터 생성 서버(30)는 분석된 시간 정보를 기초로, 추출된 단어 간의 연관 관계를 요약 데이터 내에서 표시할 수 있다. 이 때, 분석된 시간 정보는 영상 출력 장치(10)에 의해 영상의 출력이 개시된 시점으로부터 경과 시간(예를 들어, 250 seconds)인 것일 수 있다.
요약 데이터 생성 서버(30)는 생성된 요약 데이터를 영상 출력 장치(10)로 전송할 수 있다. 이러한 요약 데이터 생성 서버(30)의 일 예는 컨텐츠 제공 서버, 컨텐츠 서비스 제공자 서버, 미디어 서버, 헤드엔드 등 다양하다.
도 2는 도 1에 도시된 요약 데이터 생성 서버의 구성도의 일 예이다. 도 1 및 도 2를 참조하면, 요약 데이터 생성 서버(30)는 출력 데이터 전송부(31), 캡쳐 영상 수신부(32), 영상 분석부(33), 요약 데이터 생성부(34) 및 요약 데이터 전송부(35)를 포함할 수 있다.
다만, 도 2에 도시된 요약 데이터 생성 서버(30)는 본원의 하나의 구현 예에 불과하며, 도 2에 도시된 구성 요소들을 기초로 하여 여러 형태로 변형이 가능함은 본원의 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 이해할 수 있다. 예를 들어, 구성 요소들과 해당 구성 요소들 안에서 제공되는 기능은 더 작은 수의 구성 요소들로 결합되거나 추가적인 구성 요소들로 더 분리될 수 있다.
출력 데이터 전송부(31)는 영상 출력 장치(10)로 출력 데이터를 전송한다. 이 때, 출력 데이터는 전자 문서의 원본 또는 사본일 수 있다.
캡쳐 영상 수신부(32)는 영상 수집 장치(20)로부터 영상 출력 장치(10)에 의해 출력된 영상과 출력된 영상 상에 표시된 지시자의 캡쳐 영상을 수신한다. 이 때, 지시자는 원형, 사각형과 같은 도형 또는 직선, 물결선과 같은 선 중 어느 하나 이상으로 출력된 영상 상에 표시될 수 있다.
영상 분석부(33)는 캡쳐 영상에 대한 영상 분석을 통해, 지시자가 표시된 영역에 해당하는 단어를 추출하고, 출력 데이터 내에서 지시자가 표시된 데이터 위치 및 지시자가 표시된 시간 정보 중 하나 이상을 분석한다. 예를 들어, 지시자가 표시된 데이터 위치는 출력 데이터인 전자 문서 내에서의 페이지 번호이고, 지시자가 표시된 시간 정보는 영상 출력 장치(10)에 의해 영상의 출력이 개시된 시점으로부터의 경과시간일 수 있다. 예를 들어, 출력 데이터 내에 '모바일', '애플', 삼성'과 같은 다수의 단어가 포함되어 있고, 캡쳐 영상 중 '애플'이란 단어에 지시자가 표시된 경우, 영상 분석부(33)는 '애플'이란 단어를 추출할 수 있다. 이 때, 영상 분석부(33)는 '애플'이란 단어에 지시자가 표시된 경우, 전자 문서 내에서 해당 단어가 추출된 데이터 위치(예를 들어, 30 page) 및 시간 정보(예를 들어, 250 seconds) 중 하나 이상을 분석할 수 있다.
요약 데이터 생성부(34)는 영상 분석부(33)에서 분석된 데이터 위치 및 시간 정보 중 하나 이상과 추출된 단어를 기초로 출력 데이터에 대한 요약 데이터를 생성한다. 예를 들어, 요약 데이터 생성부(34)는 같은 단어가 반복하여 추출된 횟수를 기초로, 추출된 단어를 요약 데이터 내에서 강조하여 표시할 수 있다. 이 때, 요약 데이터 생성부(34)는 추출된 단어를 요약 데이터 내에서 강조하여 표시하기 위해, 추출된 단어의 추출된 횟수가 많을수록, 추출된 단어를 큰 도형에 표시하거나 도형의 색상을 다르게 할 수 있다. 또는, 요약 데이터 생성부(34)는 추출된 단어의 크기를 확대하여 강조할 수 있다.
요약 데이터 생성부(34)는 분석된 데이터 위치를 기초로, 추출된 단어 간의 연관 관계를 요약 데이터 내에서 표시할 수 있다. 예를 들어, 추출된 두 단어가 전자 문서 내에서 같은 페이지에 존재하거나, 또는 가까운 페이지에 존재하는 경우, 두 단어는 상호 연관성이 높을 수 있다. 또는, 요약 데이터 생성부(34)는 분석된 시간 정보를 기초로, 추출된 단어 간의 연관 관계를 요약 데이터 내에서 표시할 수 있다. 예를 들어, 영상 출력 장치(10)에 의해 영상의 출력이 개시된 시점으로부터 가까운 경과 시간에 두 단어에 지시자가 표시된 경우, 해당하는 두 단어는 상호 연관성이 높을 수 있다.
요약 데이터 전송부(35)는 요약 데이터 생성부(34)에서 생성된 요약 데이터를 영상 출력 장치(10)로 전송하거나 또는 다른 단말로부터의 요청에 의해 요청한 단말로 전송할 수 있다. 이 때, 요약 데이터는 강조 표시된 추출 단어 및 추출된 단어들의 연관 관계에 기초하여 생성될 수 있다.
도 3은 캡쳐 영상 내의 단어에 지시자가 표시된 화면을 도시한 것이다. 도 3을 참조하면, 요약 데이터 생성 서버(30)는 영상 수집 장치(20)로부터 복수의 캡쳐 영상을 프레임 단위로 수신하거나, 동영상의 형태로 수신할 수 있다. 이 때, 도 3은 복수의 캡쳐 영상 중 제 1 캡쳐 영상(350), 제 2 캡쳐 영상(360) 및 제 3 캡쳐 영상(370)을 나타낸다. 이 때, 복수의 캡쳐 영상에는 모두 지시자가 표시되어 있다. 지시자는 각각 제 1 캡쳐 영상(350)에서는 원형, 제 2 캡쳐 영상(360)에서는 선 및 제 3 캡쳐 영상(370)에서는 원형으로 표시되었다. 요약 데이터 생성 서버(30)는 캡쳐 영상에 대한 영상 분석을 통해, 지시자가 표시된 영역에 해당하는 단어를 추출한다. 예를 들어, 요약 데이터 생성 서버(30)는 제 1 캡쳐 영상(350)에서 지시자가 표시된 영역에 해당하는 단어로 'FACEBOOK.COM'을 추출할 수 있다. 다른 예를 들어, 요약 데이터 생성 서버(30)는 제 2 캡쳐 영상(360)에서 지시자가 표시된 영역에 해당하는 단어로 'games'를 추출할 수 있다. 또 다른 예를 들어, 요약 데이터 생성 서버(30)는 제 3 캡쳐 영상(370)에서 지시자가 표시된 영역에 해당하는 단어로 'TWITTER.COM'을 추출할 수 있다.
도 4는 본 발명의 일 실시예에 따른 캡쳐 영상으로부터 지시자가 표시된 단어를 추출하여 데이터베이스에 저장하는 과정을 나타낸 흐름도이다. 도 3 및 도 4를 참조하면, 단계 S410에서 캡쳐 영상 수신부(32)는 출력된 영상 상에 표시된 지시자의 캡쳐 영상을 수신한다. 단계 S420에서 영상 분석부(33)는 지시자가 표시된 영역에 해당하는 단어를 추출한다. 예를 들어, 영상 분석부(33)는 도 3에서 'FACEBOOK.COM', 'games'및 'TWITTER.COM'과 같이 지시자가 표시된 영역에 해당하는 단어를 추출할 수 있다. 단계 S430에서 영상 분석부(33)는 추출된 단어가 데이터베이스에 저장된 단어인지를 검색한다. 단계 S440에서 영상 분석부(33)는 추출된 단어가 데이터 베이스에 저장된 단어인지를 판단한다. 단계 S450에서 영상 분석부(33)는 추출된 단어가 데이터베이스에 저장된 단어일 경우, 추출된 단어의 추출 횟수를 증가시킨다. 단계 S460에서 영상 분석부(33)는 추출된 단어가 데이터베이스에 저장되어 있지 않은 단어일 경우, 데이터베이스에 새로운 단어로 추가한다. 단계 S470에서 영상 분석부(33)는 지시자의 위치, 추출된 단어, 추출된 횟수를 데이터베이스에 저장한다.
도 5a 내지 도 5b는 본 발명의 일 실시예에 따른 단어별 추출 횟수와 추출된 단어 간의 연관 관계를 나타낸 도면이다.
도 5a는 단어별 추출 횟수가 표시된 데이터베이스 테이블의 일 예를 나타낸다. 도 5a를 참조하면, 데이터베이스 테이블은 추출된 단어(510), 추출 횟수(520), 페이지(530) 및 추출 시간(540)을 포함할 수 있다. 이 때, 페이지(530)는 전자 문서 내에서의 페이지 번호를 나타내며, 추출 시간(540)은 영상 출력 장치(10)에 의해 영상의 출력이 개시된 시점으로부터의 경과 시간을 나타낸다. 예를 들어, 요약 데이터 생성 서버(30)의 영상 분석부(33)는 캡쳐 영상에 대한 영상 분석을 통해 단어(510)를 추출할 수 있다. 이 때, 추출된 단어(510)는, 예를 들어, 'Facebook', 'Twitter', 'Games', 'follower', 'Like' 및 'Connected'일 수 있다. 'Facebook'의 추출된 횟수(520)는 5번이고, 추출된 페이지(530)는 1, 1, 4, 8 및 9페이지이며, 추출 시간(540)은 각각 60s, 65s, 130s, 200s 및 250s의 정보일 수 있다. 'Twitter'의 추출된 횟수(520)는 2번이고, 추출된 페이지(530)는 2 및 2페이지이며, 추출 시간(540)은 각각 71s 및 80s일 수 있다. 'Games'의 추출된 횟수(520)는 1번이고, 추출된 페이지(530)는 1페이지이며, 추출 시간(540)은 66s일 수 있다. 'follower'의 추출된 횟수(520)는 1번이고, 추출된 페이지(530)는 2페이지이며, 추출 시간(540)은 90s일 수 있다. 'Like'의 추출된 횟수(520)는 2번이고, 추출된 페이지(530)는 8 및 9페이지이며, 추출 시간(540)은 각각 245s 및 255s일 수 있다. 'Connected'의 추출된 횟수(520)는 6번이고, 추출된 페이지(530)는 1, 1, 2, 2, 8 및 9페이지이며, 추출 시간(540)은 각각 63s, 68s, 85s, 96s, 210s 및 270s일 수 있다.
도 5b는 추출된 단어 간의 연관 관계를 나타낸 도면이다. 도 5a 및 5b를 참조하면, 요약 데이터 생성 서버(30)의 요약 데이터 생성부(34)는 분석된 데이터 위치 및 시간 정보 중 하나 이상과 추출된 단어를 기초로 출력 데이터에 대한 요약 데이터를 생성할 수 있다. 이 때, 요약 데이터는 추출된 단어들과의 연관 관계에 기초하여 생성되며, 연관 관계는 단어 추출 횟수별 연관 관계(550), 분석된 데이터 위치에 의한 연관 관계(560), 노드 중심에 의한 연관 관계(570) 및 분석된 시간 관계에 의한 연관 관계(580)를 포함할 수 있다.
단어 추출 횟수별 연관 관계(550)는 추출된 단어의 추출 횟수에 기초하여 강조하여 표시할 도형의 크기를 결정하기 위해 사용될 수 있다. 예를 들어, 도 4의 추출된 단어별 추출 횟수는 'Facebook'은 5번, 'Twitter'는 2번, 'Games'는 1번, 'follower'는 1번, 'Like'는 2번 및 'Connected'는 6번이므로, 추출 횟수에 따라 'Connected' > 'Facebook' > 'Twitter' = 'Like' > 'Games' = 'follower'순으로 도형의 크기가 결정된다.
분석된 데이터 위치에 의한 연관 관계(560)는 추출된 단어들과의 연관성을 부여하기 위하여 연관선을 표시하는데 사용될 수 있다. 이 때, 분석된 데이터 위치는 전자 문서 내에서의 페이지 번호일 수 있다. 예를 들어, 도 4의 추출된 단어별 페이지는 'Facebook'은 1, 4, 8 및 9페이지, 'Twitter'는 2페이지, 'Games'는 1페이지, 'follwer'는 2페이지, 'Like'는 8 및 9페이지, 'Connected'는 1, 2, 8 및 9페이지일 수 있다. 이 때, 1페이지에서는 'Facebook', 'Games' 및 'Connected'가 함께 추출되었므로, 이 세 개의 단어는 연관선으로 연결될 수 있다. 또한, 2페이지에서는 'Twitter', 'follower' 및 'Connected'가 함께 추출되었므로, 이 세 개의 단어는 연관선으로 연결될 수 있다. 또한, 8페이지에서는 'Facebook', 'Like' 및 'Connected'가 함께 추출되었므로, 이 세 개의 단어는 연관선으로 연결될 수 있다. 또한, 9페이지에서는 'Facebook'과 'Connected'가 함께 추출되었므로, 이 두 개의 단어는 연관선으로 연결될 수 있다.
노드 중심에 의한 연관 관계(570)는 단어간 연관선이 중복되는 경우, 이를 간략화 하기 위해 특정 노드를 기준으로 하여 중복된 연관선을 제거하기 위해 사용될 수 있다. 예를 들어, 가장 작은 노드인 'Games'를 기준이 될 특정 노드로 가정하자. 이 때, 'Games'를 기준으로 'Facebook'과 'Connected'가 중첩 연결되었으므로, 'Facebook'과 'Connected' 사이의 연관선은 제거될 수 있다. 또한, 또 다른 가장 작은 노드인 'follower'를 기준으로 'Twitter'와 'Connected'가 중첩 연결되었으므로, 'Twitter'와 'Connected' 사이의 연관선도 제거될 수 있다.
분석된 시간 관계에 의한 연관 관계(580)는 추출된 단어들의 추출 시간의 차이가 문턱값(Threshold Value=10s) 이상이면, 두 단어간 연관도가 상대적으로 적다고 판단하여 연관선을 제거하기 위해 사용될 수 있다. 예를 들어, 'Like'의 추출 시간(540)은 245s 및 255s이며, 'Connected'의 추출 시간(540)은 63s, 68s, 85s, 96s, 210s 및 270s일 수 있다. 이 때, 'Like'의 추출 시간(540) 중 245s는 'Connected'의 추출 시간(540) 중 210s와는 35s정도의 차이가 존재하며, 270s와는 25s의 차이가 존재하여 문턱값인 10s를 초과하는 것을 알 수 있다. 또한, 'Like'의 추출 시간(540) 중 255s는 'Connected'의 추출 시간(540) 중 270s와는 15s 정도의 차이가 존재하며, 이는 문턱값인 10s를 초과하는 것을 알 수 있다. 따라서, 'Like'와 'Connected'와의 연관도는 상대적으로 적으므로, 이 둘 사이의 연관선은 제거될 수 있다.
도 6은 본 발명의 일 실시예에 따른 요약 데이터 생성 방법을 나타낸 흐름도이다. 도 6에 도시된 실시예에 따른 요약 데이터 생성 방법은 도 1에 도시된 실시예에 따른 요약 데이터 생성 시스템(1)에서 시계열적으로 처리되는 단계들을 포함한다. 따라서, 이하 생략된 내용이라고 하더라도 도 1에 도시된 실시예에 따른 요약 데이터 생성 시스템(1)에 관하여 이미 기술된 내용은 도 6에 도시된 실시예에 따른 요약 데이터 생성 방법에도 적용된다.
단계 S610에서 요약 데이터 생성 서버(30)의 출력 데이터 전송부(31)는 영상 출력 장치(10)로 출력 데이터를 전송한다. 단계 S620에서 캡쳐 영상 수신부(32)는 영상 수집 장치(20)로부터, 영상 출력 장치(10)에 의해 출력된 영상과 출력된 영상 상에 표시된 지시자의 캡쳐 영상을 수신한다. 단계 S630에서 영상 분석부(33)는 캡쳐 영상에 대한 영상 분석을 통해, 지시자가 표시된 영역에 해당하는 단어를 추출하고, 출력 데이터 내에서 지시자가 표시된 데이터 위치 및 지시자가 표시된 시간 정보 중 하나 이상을 분석한다. 단계 S640에서 요약 데이터 생성부(34)는 분석된 데이터 위치 및 시간 정보 중 하나 이상과 추출된 단어를 기초로 출력 데이터에 대한 요약 데이터를 생성한다.
도 6을 통해 설명된 요약 데이터 생성 방법은 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행 가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
10: 영상 출력 장치
20: 영상 수집 장치
30: 요약 데이터 생성 서버
31: 출력 데이터 전송부
32: 캡쳐 영상 수신부
33: 영상 분석부
34: 요약 데이터 생성부
35: 요약 데이터 전송부
20: 영상 수집 장치
30: 요약 데이터 생성 서버
31: 출력 데이터 전송부
32: 캡쳐 영상 수신부
33: 영상 분석부
34: 요약 데이터 생성부
35: 요약 데이터 전송부
Claims (17)
- 요약 데이터 생성 서버에 있어서,
영상 출력 장치로 출력 데이터를 전송하는 출력 데이터 전송부;
영상 수집 장치로부터, 상기 영상 출력 장치에 의해 출력된 영상과 상기 출력된 영상 상에 표시된 지시자의 캡쳐 영상을 수신하는 캡쳐 영상 수신부;
상기 캡쳐 영상에 대한 영상 분석을 통해, 상기 지시자가 표시된 영역에 해당하는 단어를 추출하고, 상기 출력 데이터 내에서 상기 지시자가 표시된 데이터 위치 및 상기 지시자가 표시된 시간 정보 중 하나 이상을 분석하는 영상 분석부; 및
상기 분석된 데이터 위치 및 시간 정보 중 하나 이상과 상기 추출된 단어를 기초로 상기 출력 데이터에 대한 요약 데이터를 생성하는 요약 데이터 생성부
를 포함하는, 요약 데이터 생성 서버.
- 제 1 항에 있어서,
상기 추출된 단어가 반복하여 추출된 횟수를 기초로, 상기 추출된 단어를 상기 요약 데이터 내에서 강조하여 표시하는 것인, 요약 데이터 생성 서버.
- 제 1 항에 있어서,
상기 분석된 데이터 위치를 기초로, 상기 추출된 단어 간의 연관 관계를 상기 요약 데이터 내에서 표시하는 것인, 요약 데이터 생성 서버.
- 제 3 항에 있어서,
상기 출력 데이터는 전자 문서이고, 상기 분석된 데이터 위치는 상기 전자 문서 내에서의 페이지 번호인 것인, 요약 데이터 생성 서버.
- 제 1 항에 있어서,
상기 분석된 시간 정보를 기초로, 상기 추출된 단어 간의 연관 관계를 상기 요약 데이터 내에서 표시하는 것인, 요약 데이터 생성 서버.
- 제 5 항에 있어서,
상기 출력 데이터는 전자 문서이고, 상기 분석된 시간 정보는 상기 영상 출력 장치에 의해 상기 영상의 출력이 개시된 시점으로부터의 경과 시간인 것인, 요약 데이터 생성 서버.
- 제 1 항에 있어서,
상기 영상 분석부는 상기 캡쳐 영상에 대한 문자 인식, 숫자 인식, 이미지 검색 중 하나 이상을 통해 상기 데이터 위치를 분석하는 것인, 요약 데이터 생성 서버.
- 제 1 항에 있어서,
상기 요약 데이터를 상기 영상 출력 장치로 전송하는 요약 데이터 전송부
를 더 포함하는 것인, 요약 데이터 생성 서버.
- 요약 데이터 생성 시스템에 있어서,
서버로부터 전송된 출력 데이터의 영상을 출력하는 영상 출력 장치;
상기 출력된 영상과 상기 출력된 영상 상에 표시된 지시자의 캡쳐 영상을 상기 서버로 전송하는 영상 수집 장치; 및
상기 캡쳐 영상에 대한 영상 분석을 통해, 상기 지시자가 표시된 영역에 해당하는 단어를 추출하고, 상기 출력 데이터 내에서 상기 지시자가 표시된 데이터 위치 및 상기 지시자가 표시된 시간 정보 중 하나 이상을 분석하고, 상기 분석된 데이터 위치 및 시간 정보 중 하나 이상과 상기 추출된 단어를 기초로 상기 출력 데이터에 대한 요약 데이터를 생성하는 서버
를 포함하는, 요약 데이터 생성 시스템.
- 제 9 항에 있어서, 상기 서버는
상기 추출된 단어가 반복하여 추출된 횟수를 기초로, 상기 추출된 단어를 상기 요약 데이터 내에서 강조하여 표시하는 것인, 요약 데이터 생성 시스템.
- 제 9 항에 있어서, 상기 서버는
상기 분석된 데이터 위치를 기초로, 상기 추출된 단어 간의 연관 관계를 상기 요약 데이터 내에서 표시하는 것인, 요약 데이터 생성 시스템.
- 제 11 항에 있어서,
상기 출력 데이터는 전자 문서이고, 상기 분석된 데이터 위치는 상기 전자 문서 내에서의 페이지 번호인 것인, 요약 데이터 생성 시스템.
- 제 12 항에 있어서,
상기 분석된 시간 정보를 기초로, 상기 추출된 단어 간의 연관 관계를 상기 요약 데이터 내에서 표시하는 것인, 요약 데이터 생성 시스템.
- 제 13 항에 있어서,
상기 출력 데이터는 전자 문서이고, 상기 분석된 시간 정보는 상기 영상 출력 장치에 의해 상기 영상의 출력이 개시된 시점으로부터의 경과 시간인 것인, 요약 데이터 생성 시스템.
- 제 9 항에 있어서, 상기 서버는
상기 캡쳐 영상에 대한 문자 인식, 숫자 인식, 이미지 검색 중 하나 이상을 통해 상기 데이터 위치를 분석하는 것인, 요약 데이터 생성 시스템.
- 제 9 항에 있어서, 상기 서버는
상기 요약 데이터를 상기 영상 출력 장치로 전송하는, 요약 데이터 생성 시스템.
- 요약 데이터 생성 방법에 있어서,
영상 출력 장치로 출력 데이터를 전송하는 단계;
영상 수집 장치로부터, 상기 영상 출력 장치에 의해 출력된 영상과 상기 출력된 영상 상에 표시된 지시자의 캡쳐 영상을 수신하는 단계;
상기 캡쳐 영상에 대한 영상 분석을 통해, 상기 지시자가 표시된 영역에 해당하는 단어를 추출하고, 상기 출력 데이터 내에서 상기 지시자가 표시된 데이터 위치 및 상기 지시자가 표시된 시간 정보 중 하나 이상을 분석하는 단계; 및
상기 분석된 데이터 위치 및 시간 정보 중 하나 이상과 상기 추출된 단어를 기초로 상기 출력 데이터에 대한 요약 데이터를 생성하는 단계
를 포함하는, 요약 데이터 생성 방법.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR20130082928A KR20150009106A (ko) | 2013-07-15 | 2013-07-15 | 요약 데이터를 생성하는 서버 및 방법, 그리고 시스템 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR20130082928A KR20150009106A (ko) | 2013-07-15 | 2013-07-15 | 요약 데이터를 생성하는 서버 및 방법, 그리고 시스템 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20150009106A true KR20150009106A (ko) | 2015-01-26 |
Family
ID=52572418
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR20130082928A KR20150009106A (ko) | 2013-07-15 | 2013-07-15 | 요약 데이터를 생성하는 서버 및 방법, 그리고 시스템 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20150009106A (ko) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20200063841A (ko) * | 2018-11-28 | 2020-06-05 | 삼성생명보험주식회사 | 문서 이미지로부터 인식된 용어를 표준화하기 위한 방법 |
| CN111307848A (zh) * | 2018-11-30 | 2020-06-19 | 株式会社岛津制作所 | 分析系统、分析装置、服务器以及信息处理方法 |
| WO2024080672A1 (ko) * | 2022-10-13 | 2024-04-18 | 엘지전자 주식회사 | 영상 컨텐츠 생성을 위한 사용자 단말, 서버 및 시스템, 그리고 이를 위한 방법 |
-
2013
- 2013-07-15 KR KR20130082928A patent/KR20150009106A/ko not_active Application Discontinuation
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20200063841A (ko) * | 2018-11-28 | 2020-06-05 | 삼성생명보험주식회사 | 문서 이미지로부터 인식된 용어를 표준화하기 위한 방법 |
| CN111307848A (zh) * | 2018-11-30 | 2020-06-19 | 株式会社岛津制作所 | 分析系统、分析装置、服务器以及信息处理方法 |
| CN111307848B (zh) * | 2018-11-30 | 2023-09-08 | 株式会社岛津制作所 | 分析系统、分析装置、服务器以及信息处理方法 |
| WO2024080672A1 (ko) * | 2022-10-13 | 2024-04-18 | 엘지전자 주식회사 | 영상 컨텐츠 생성을 위한 사용자 단말, 서버 및 시스템, 그리고 이를 위한 방법 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11917242B2 (en) | Identification and presentation of content associated with currently playing television programs | |
| AU2010313957B2 (en) | Apparatus and method for synchronizing E-book content with video content and system thereof | |
| USRE48430E1 (en) | Two-dimensional code processing method and terminal | |
| US9544544B2 (en) | Method and system for sharing information between users in media reproducing system | |
| JP2006127518A (ja) | プレゼンテーションの取得及び保存のためのシステムと方法 | |
| CN104092713A (zh) | 一种网络资源的下载信息展示方法及装置 | |
| CN104361075A (zh) | 一种图像网址系统及实现方法 | |
| US9525896B2 (en) | Automatic summarizing of media content | |
| AU2014259879B2 (en) | Interactive viewing experiences by detecting on-screen text | |
| US20190342428A1 (en) | Content evaluator | |
| CN102541836B (zh) | 一种调整版式文件版面的方法及装置 | |
| CN110019906B (zh) | 用于显示信息的方法和装置 | |
| KR20150009106A (ko) | 요약 데이터를 생성하는 서버 및 방법, 그리고 시스템 | |
| KR20200024541A (ko) | 동영상 컨텐츠 검색 지원 방법 및 이를 지원하는 서비스 장치 | |
| KR102183363B1 (ko) | 증강 현실 및 복합 현실을 이용한 정보 검색 장치 및 방법 | |
| US11128927B2 (en) | Content providing server, content providing terminal, and content providing method | |
| KR20090035989A (ko) | 컨텐츠 획득 시스템 및 그 방법 | |
| US9342813B2 (en) | Apparatus and method for displaying log information associated with a plurality of displayed contents | |
| KR20100124952A (ko) | 문자인식을 이용한 휴대형 단말기의 증강현실 기반 실시간 ａｒ컨텐츠 제공시스템 및 그 방법 | |
| CN112601129B (zh) | 视频交互系统、方法和接收端 | |
| CN113965798A (zh) | 一种视频信息生成、展示方法、装置、设备及存储介质 | |
| KR20160043581A (ko) | 인기 메시지 추출 장치 및 방법 | |
| US10009572B2 (en) | Method for enhancing media content of a picture | |
| CN114341866A (zh) | 同声传译方法、装置、服务器和存储介质 | |
| KR20100116724A (ko) | 멀티미디어 데이터 검색을 위한 사용자 인터페이스 시스템 및 그 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| WITN | Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid |