KR101315951B1

KR101315951B1 - 마커 인식과 영역 추적을 통한 영상 관리장치

Info

Publication number: KR101315951B1
Application number: KR1020120018082A
Authority: KR
Inventors: 김정태; 구경모
Original assignee: 김정태
Priority date: 2012-02-22
Filing date: 2012-02-22
Publication date: 2013-10-08
Also published as: KR20130016037A

Abstract

본 발명은 회의 등의 내용을 촬영한 영상에 포함된 마커를 인식하고 마커가 설정된 영역만을 추출하여 기록 및 보관을 용이하게 할 수 있는 마커 인식과 영역 추적을 통한 영상 관리장치에 관한 것이다.
본 발명의 주요구성은 외부로부터 영상을 제공받는 영상 관리모듈(21)과; 마커로 인식될 수 있는 마커를 등록받는 마커 등록모듈(22)과; 영상 관리모듈(21)로 제공된 영상에서 마커를 인식하는 마커 인식모듈(23)과; 마커 인식모듈(23)을 통해 영상에 포함된 마커가 인식되면 인식된 마커가 구성하는 영역을 확인하는 마커영역 인식모듈(24)과; 마커영역 인식모듈(24)에서 인식되어 분리된 영역을 이미지로 추출하는 마커영역 추출모듈(25); 및 추출된 이미지를 와핑작업을 통해 평면화하는 추출이미지 보정모듈(28)을 더 포함하는 것을 특징으로 한다.

Description

마커 인식과 영역 추적을 통한 영상 관리장치{IMAGE MANAGEMENT APPARATUS USING MAKER RECOGNITION AND IMAGE TRACING}

본 발명은 회의 등의 내용을 촬영한 영상에 포함된 마커를 인식하고 마커가 설정된 영역만을 추출하여 기록 및 보관을 용이하게 할 수 있는 마커 인식과 영역 추적을 통한 영상 관리장치에 관한 것이다.

일반적으로 회의 또는 강의 진행자는 화이트보드 등에 내용을 기재하는 경우가 많아, 참가자가 이를 기록하기 위해서는 회의 또는 강의에 집중하지 못하는 문제가 있으며, 참가자가 기록을 하지 않는 경우에는 회의 또는 강의 내용이 시간이 경과함에 따라 잊어지는 문제가 있다.

이러한 문제점을 해결하기 위하여 회의 등의 내용을 기록하기 위해서는 회의 등의 장면을 동영상으로 촬영하여 기록하거나 또는 녹음기로 녹음하는 방법을 사용하지만, 매번 현장을 녹화할 수 없을 뿐만아니라 회의에 2개 이상의 주제가 포함되어 경우에는 촬영된 영상을 주제별로 분리하기 어려운 문제가 있다.

본 발명이 해결하고자 하는 과제는 회의 등의 내용을 촬영한 영상에 포함된 마커를 인식하고 마커가 설정된 영역만을 추출하여 기록 및 보관을 용이하게 할 수 있는 마커 인식과 영역 추적을 통한 영상 관리장치를 제공하는 데 있다.

본 발명의 다른 해결과제는 촬영된 영상에서 직접 추출할 영역을 마커로 설정하고 마커가 설정된 영역만을 추출하여 용이하게 기록 및 보관할 수 있는 마커 인식과 영역 추적을 통한 영상 관리장치를 제공하는 데 있다.

본 발명의 또다른 해결과제는 마커로 추출된 이미지에서 텍스트정보를 추출하여 이미지와 텍스트를 함께 보관하여 용이하게 이미지에 대한 내용을 확인할 수 있는 마커 인식과 영역 추적을 통한 영상 관리장치를 제공하는 데 있다.

본 발명에 따른 마커 인식과 영역 추적을 통한 영상 관리장치는, 외부로부터 영상을 제공받는 영상 관리모듈(21)과; 마커로 인식될 수 있는 마커를 등록받는 마커 등록모듈(22)과; 영상 관리모듈(21)로 제공된 영상에서 마커를 인식하는 마커 인식모듈(23)과; 마커 인식모듈(23)을 통해 영상에 포함된 마커가 인식되면 인식된 마커가 구성하는 영역을 확인하는 마커영역 인식모듈(24)과; 마커영역 인식모듈(24)에서 인식되어 분리된 영역을 이미지로 추출하는 마커영역 추출모듈(25); 및 추출된 이미지를 와핑작업을 통해 평면화하는 추출이미지 보정모듈(28)을 더 포함하는 것을 특징으로 한다.

바람직하게, 영상 관리모듈(21)로 제공되는 영상은 스마트폰의 카메라, 디지털카메라 또는 노트북이나 데스크톱 컴퓨터의 웹캠(화상 카메라), 외부 단말기로부터 제공받은 것을 특징으로 한다.

바람직하게, 영상 관리모듈(21)은 영상을 제공받는 경우에 영상에 관련된 정보를 함께 제공받는 것을 특징으로 한다.

바람직하게, 등록되는 마커는 기하학 도형 및 텍스트, 숫자, 색상, 점, 선 등 기계적으로 식별 가능한 특징을 갖는 것을 특징으로 한다.

바람직하게, 마커는 기본값으로 설정되거나 또는 제공받은 영상에서 추출하여 즉석에서 등록받는 것을 특징으로 한다.

바람직하게, 마커영역 추출모듈(25)은 동일한 영상에서 분리된 추출이미지가 다수개 존재하는 경우에 각각의 이미지에 별도의 순번을 부여하는 것을 특징으로 한다.

바람직하게, 마커영역 추출모듈(25)을 통해 저장된 각각의 이미지의 내용을 분석하여 텍스트로 인식되는 내용을 텍스트 정보로 추출하는 텍스트 추출모듈(26)을 더 포함하는 것을 특징으로 한다.

바람직하게, 마커영역 추출모듈(25) 및 텍스트 추출모듈(26)을 통해 각각 추출된 이미지 또는 텍스트정보에 관련된 정보를 입력할 수 있도록 관리하는 부가정보 관리모듈(27)을 더 포함하는 것을 특징으로 한다.

삭제

본 발명의 마커 인식과 영역 추적을 통한 영상 관리장치는 회의, 강의, 출력문서, 노트, 포스트잇 등의 내용을 촬영한 영상에서 배경이 서로 분리되는 부분에 마커를 표시하면 마커가 설정된 영역만을 추출하여 보관할 수 있는 장점이 있다.

또한, 마커가 존재하지 않는 영상에도 직접 마커를 표시할 수 있어 사용자가 편리하게 영상을 편집하고 보관할 수 있는 장점이 있다.

또한, 마커로 분리된 영상의 내용을 텍스트로도 함께 추출할 수 있어 시간이 경과한 후에도 편리하게 해당 내용을 손쉽게 확인할 수 있는 장점이 있다.

도 1은 본 발명에 따른 마커 인식과 영역 추적을 통한 영상 관리장치의 예시도.
도 2는 본 발명에 따른 관리서버의 블록도.
도 3은 본 발명에 따른 마커 인식과 영역 추적을 통한 영상 관리 방법의 플로차트.

이하, 첨부된 도면을 참조하여 본 발명에 따른 마커 인식과 영역 추적을 통한 영상 관리장치를 상세히 설명한다.

도 1에 도시된 바와 같이 본 발명에 따른 마커 인식과 영역 추적을 통한 영상 관리장치는 회의, 강의, 출력문서, 노트, 포스트잇 등을 촬영한 영상을 등록받고, 등록받은 영상에서 마커(10)를 추적하여 마커(10)로 형성되는 영역을 이미지로 추출한다. 이미지로 분리된 영상은 저장되거나 또는 외부 시스템과 연동하여 관리할 수 있다.

도 2에 도시된 바와 같이, 본 발명에 따른 마커 인식과 영역 추적을 통한 영상 관리장치(20)은 영상 관리모듈(21), 마커 등록모듈(22), 마커 인식모듈(23), 마커영역 인식모듈(24), 마커영역 추출모듈(25), 텍스트 추출모듈(26), 부가정보 관리모듈(27), 추출이미지 보정모듈(28) 및 각종 데이터베이스(31~33)를 포함한다.

영상 관리모듈(21)은 외부로부터 영상을 제공받는다. 영상 관리모듈(21)에서 제공받은 영상은 영상DB(30)에 임시 저장되는 것이 바람직하다. 영상 관리모듈(21)로 제공되는 영상은 유무선통신을 통해 스마트폰의 카메라, 디지털카메라 또는 노트북이나 데스크톱 컴퓨터의 웹캠(화상 카메라), 외부 단말기 등으로부터 제공받을 수 있다. 영상 관리모듈(21)은 해당 영상의 등록 날짜, 제목, 요약, 촬영자 및 부서 등의 정보를 함께 제공받거나 관련 정보의 입력 등을 할 수 있는 입력창을 제공하는 것이 바람직하다.

마커 등록모듈(22)은 마커로 인식되는 마커의 종류에 대하여 등록받아 마커DB(31)에 저장하고 관리한다. 등록되는 마커는 원모양, 별모양, 각종 로그, 특정 기하학 모양, 기하학 도형 및 텍스트, 숫자, 색상, 점, 선 등과 같이 식별 가능한 것은 모두 포함한다. 또한, 제공받은 영상에서 추출하여 즉석에서 등록받을 수도 있다.

마커 인식모듈(23)은 영상 관리모듈(21)로 제공된 영상에서 마커(10)를 인식한다. 마커의 인식은 기본값으로 설정된 마커를 인식하거나 또는 사용자가 등록된 마커 중에서 인식대상의 마커를 선택하면 인식하거나 또는 사용자가 영상에 마커를 표시하면 즉석에서 인식할 수도 있다.

마커영역 인식모듈(24)은 마커 인식모듈(23)을 통해 영상 이미지에 포함된 마커(10)가 인식되면 인식된 마커가 구성하는 영역을 확인한다. 이때, 마커영역 인식모듈(24)은 하나의 영상 이미지에 다수의 마커가 존재하는 경우에는 마커의 색상에 따라 각각 영역을 분리한다. 예를 들면, 별모양으로 4개의 마커와 원형 빨간색으로 3개의 마커가 존재하는 경우에 마커영역 인식모듈(24)은 별모양으로 인식된 4개의 마커를 연결하여 형성된 사각형 영역을 1차 영역으로 인식하고, 원형 빨간색으로 인식된 3개의 마커를 연결하여 형성된 삼각형 영역을 2차 영역으로 인식한다.

마커영역 추출모듈(25)은 마커영역 인식모듈(24)에서 인식된 마커(10)들 사이의 영역을 이미지로 추출한다. 마커영역 추출모듈(25)을 통해 추출된 추출이미지는 추출이미지DB(32)에 저장되는 것이 바람직하다. 이때, 추출된 이미지는 날짜, 내용, 촬영자 등의 부가 요소를 고려하여 추후 열람이 용이한 형태로 저장된다. 마커영역 추출모듈(25)은 동일한 영상에서 분리된 추출이미지가 다수개 존재하는 경우에 각각의 이미지에 별도의 순번을 부여하여 저장하는 것이 바람직하다. 또한, 저장되는 추출이미지는 마커의 종류에 따라 별로도 저장되는 것이 바람직하다.

텍스트 추출모듈(26)은 마커영역 추출모듈(25)을 통해 저장된 각각의 이미지의 내용을 분석하여 텍스트로 인식되는 내용을 텍스트 정보로 추출하여 텍스트DB(33)에 저장한다. 텍스트 정보는 문자인식방법으로 이미지에서 추출할 수 있으며, 텍스트 추출모듈(26)에서 추출된 텍스트 정보는 추출이미지DB(32)에 저장된 이미지와 함께 저장되는 것이 바람직하다. 이에 따라 사용자는 시간이 경과한 후에도 쉽게 열람할 수 있다.

부가정보 관리모듈(27)은 마커영역 추출모듈(25) 및 텍스트 추출모듈(26)을 통해 각각 저장되는 추출이미지 또는 텍스트정보의 기록사항을 정리할 수 있도록 관리한다. 예를 들면, 부가정보 관리모듈(27)은 사용자가 제목, 시간, 부서, 내용 등을 입력할 수 있도록 입력창을 제공하며 입력된 내용은 저장된 이미지 또는 텍스트정보와 함께 저장된다.

추출이미지 보정모듈(28)은 추출된 이미지를 평면화되도록 와핑작업을 통해 보정한다. 예를 들면, 와핑 작업을 통해 4개의 마카를 사용하여 추출된 이미지의 경우에는 직사각형 또는 정사각형이 되도록 내각을 동일하게 보정할 수 있다.

본 발명의 다른 실시예에 따른 마커 인식과 영역 추적을 통한 영상 관리장치는 마커 설정모듈(29)을 더 포함한다.

마커 설정모듈(29)은 영상 관리모듈(21)을 통해 제공받은 영상에서 저장이 필요한 부분을 감싸도록 마커를 표시한다. 이때, 마커는 클릭, 드래그, 터치 등의 수단을 통해 설정할 수 있다. 이러한 마커 설정모듈(29)을 통해 사용자는 마커가 없는 영상이라도 직접 필요한 부분에 마커를 표시하여 간단하게 영상을 분리할 수 있다.

이하, 도 3의 플로차트를 참조하여 본 발명에 따른 마커 인식과 영역 추적을 통한 영상 관리과정에 대하여 자세히 살펴본다.

먼저, 영상 관리모듈(21)은 스마트폰의 카메라, 디지털카메라 또는 노트북이나 데스크톱 컴퓨터의 웹캠(화상 카메라) 등을 통해 촬영된 영상을 등록받는다(단계 S101). 등록된 영상은 영상DB(30)에 저장되며, 영상 등록시 날짜, 제목, 요약, 촬영자 및 부서 등을 함께 제공받아 저장한다.

기본값으로 설정된 마커를 따르거나 인식해야 되는 마커를 사용자가 선정하면(단계 S102), 마커 인식모듈(23)은 제공받은 영상에 해당 마커(10)가 포함되어 있는지를 확인한다(단계 S103). 이때, 마커 인식모듈(23)에서 인식하는 마커(10)는 사용자가 마커 등록모듈(22)에 저장되어 있는 마커 중에서 선택하거나 또는 사용자가 영상에 포함된 각종 로그, 특정 기하학 모양, 기하학 도형 및 텍스트, 색상, 숫자, 점 등의 식별 가능한 대상을 마커로 인식하도록 설정할 수 있다.

한편, 영상에 마커가 포함되어 있지 않거나 또는 사용자가 직접 영상에서 저장이 필요한 부분을 설정하는 경우에는 마커 설정모듈(29)을 통해 직접 영상에 마커를 표시할 수 있다(단계 S104).

이와 같은 과정을 통해 영상에 표시된 마커(10)가 인식되면 마커영역 인식모듈(24)은 영상에 포함된 마커(10)를 순차적으로 인식하고(단계 S105), 인식된 마커를 연결하여 분리영역을 설정한다(단계 S106). 예를 들면, 별모양으로 4개의 마커와 원형 빨간색으로 3개의 마커가 존재하는 경우에 마커영역 인식모듈(24)은 별모양으로 인식된 4개의 마커를 연결하여 형성된 사각형 영역을 1차 분리영역으로 인식하고, 원형 빨간색으로 인식된 3개의 마커를 연결하여 형성된 삼각형 영역을 2차 분리영역으로 인식한다.

그 후, 마커영역 추출모듈(25)을 통해 마커영역 인식모듈(24)에서 인식된 영역을 이미지로 추출하고 추출이미지DB(32)에 저장한다(단계 S107). 이때, 마커의 종류 및 색상에 따라 별로도 저장되는 것이 바람직하다. 또한, 사용자에게 입력창을 제공하여 추출된 이미지에 관련된 제목, 시간, 부서, 내용 등을 제공받는다.

한편, 추출이미지 보정모듈(28)은 추출된 이미지를 분석하여 평면화되도록 와핑작업을 통해 보정한다(단계 S108, S109). 예를 들면, 4개의 마카를 사용하여 추출된 이미지의 경우에는 와핑작업을 통해 직사각형 또는 정사각형이 되도록 내각을 동일하게 보정할 수 있다.

그리고, 마커영역 추출모듈(25)에서 추출되어 저장되는 이미지의 내용은 텍스트 추출모듈(26)에서 텍스트로 인식되어 텍스트DB(33)에 저장된다(단계 S110). 텍스트 정보는 문자인식방법으로 이미지에서 추출할 수 있으며, 텍스트 추출모듈(26)에서 추출된 텍스트 정보는 추출이미지DB(32)에 저장된 이미지와 함께 확인할 수 있도록 저장되는 것이 바람직하다.

본 발명은 상술한 바람직한 실시예에만 한정되는 것이 아니라 본 발명의 요지를 벗어나지 않는 범위 내에서 여러 가지로 개량, 변경, 대체 또는 부가하여 실시할 수 있는 것임은 당해 기술 분야에 통상의 지식을 가진 자라면 용이하게 이해할 수 있을 것이다. 이러한 개량, 변경, 대체 또는 부가에 의한 실시가 이하의 첨부된 청구범위의 범주에 속하는 것이라면 그 기술사상 역시 본 발명에 속하는 것으로 간주한다.

20 : 영상 관리장치 21 : 영상 관리모듈
22 : 마커 등록모듈 23 : 마커 인식모듈
24 : 마커영역 인식모듈 25 : 마커영역 추출모듈
26 : 텍스트 추출모듈 27 : 부가정보 관리모듈
28 : 추출이미지 보정모듈 29 : 마커 설정모듈

Claims

외부로부터 영상을 제공받는 영상 관리모듈(21)과;
마커로 인식될 수 있는 마커를 등록받아 관리하는 마커 등록모듈(22)과;
영상 관리모듈(21)로 제공된 영상에서 마커(10)를 인식하는 마커 인식모듈(23)과;
마커 인식모듈(23)을 통해 영상에 포함된 마커(10)가 인식되면 인식된 마커(10)가 구성하는 영역을 확인하는 마커영역 인식모듈(24)과;
마커영역 인식모듈(24)에서 인식되어 분리된 영역을 이미지로 추출하는 마커영역 추출모듈(25)과;
추출된 이미지를 와핑작업을 통해 평면화하는 추출이미지 보정모듈(28)을 포함하는 것을 특징으로 하는 마커 인식과 영역 추적을 통한 영상 관리장치.
청구항 1에 있어서, 영상 관리모듈(21)로 제공되는 영상은 스마트폰의 카메라, 디지털카메라, 노트북이나 데스크톱 컴퓨터의 웹캠(화상 카메라) 또는 외부 단말기로부터 제공받은 것을 특징으로 하는 마커 인식과 영역 추적을 통한 영상 관리장치.
청구항 1에 있어서, 영상 관리모듈(21)은 영상을 제공받는 경우에 영상에 관련된 정보를 함께 제공받는 것을 특징으로 하는 마커 인식과 영역 추적을 통한 영상 관리장치.
청구항 1에 있어서, 등록되는 마커는 기계적으로 식별 가능한 것을 특징으로 하는 마커 인식과 영역 추적을 통한 영상 관리장치.
청구항 4에 있어서, 마커는 로그, 기하학 모양, 기하학 도형 및 텍스트, 색상, 숫자, 점 중의 어느 하나인 것을 특징으로 하는 마커 인식과 영역 추적을 통한 영상 관리장치.
청구항 1에 있어서, 마커는 기본값으로 설정되거나 또는 제공받은 영상에서 추출하여 즉석에서 등록받는 것을 특징으로 하는 마커 인식과 영역 추적을 통한 영상 관리장치.
청구항 1에 있어서, 마커영역 추출모듈(25)은 동일한 영상에서 분리된 추출이미지가 다수개 존재하는 경우에 각각의 이미지에 별도의 순번을 부여하여 저장되는 것을 특징으로 하는 마커 인식과 영역 추적을 통한 영상 관리장치.
청구항 1에 있어서, 영상 관리모듈(21)을 통해 제공받은 영상에 마커를 표시하는 마커 설정모듈(29)을 더 포함하는 것을 특징으로 하는 마커 인식과 영역 추적을 통한 영상 관리장치.
청구항 1에 있어서, 마커영역 추출모듈(25)을 통해 저장된 각각의 이미지의 내용을 분석하여 텍스트로 인식되는 내용을 텍스트 정보로 추출하여 저장하는 텍스트 추출모듈(26)을 더 포함하는 것을 특징으로 하는 마커 인식과 영역 추적을 통한 영상 관리장치.
청구항 1에 있어서, 마커영역 추출모듈(25) 및 텍스트 추출모듈(26)을 통해 각각 저장되는 이미지 또는 텍스트정보의 기록사항을 정리할 수 있도록 관리하는 부가정보 관리모듈(27)을 더 포함하는 것을 특징으로 하는 마커 인식과 영역 추적을 통한 영상 관리장치.
삭제
청구항 1에 있어서, 추출이미지 보정모듈(28)은 4개의 마카를 사용하여 추출된 이미지의 경우에는 와핑 작업을 통해 내각을 동일하게 보정하는 것을 특징으로 하는 마커 인식과 영역 추적을 통한 영상 관리장치.
삭제
삭제