KR101748139B1 - 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치 및 방법 - Google Patents

복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치 및 방법 Download PDF

Info

Publication number
KR101748139B1
KR101748139B1 KR1020140195473A KR20140195473A KR101748139B1 KR 101748139 B1 KR101748139 B1 KR 101748139B1 KR 1020140195473 A KR1020140195473 A KR 1020140195473A KR 20140195473 A KR20140195473 A KR 20140195473A KR 101748139 B1 KR101748139 B1 KR 101748139B1
Authority
KR
South Korea
Prior art keywords
image
key point
similarity
captured image
point information
Prior art date
Application number
KR1020140195473A
Other languages
English (en)
Other versions
KR20160081530A (ko
Inventor
신민호
Original Assignee
명지대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 명지대학교 산학협력단 filed Critical 명지대학교 산학협력단
Priority to KR1020140195473A priority Critical patent/KR101748139B1/ko
Publication of KR20160081530A publication Critical patent/KR20160081530A/ko
Application granted granted Critical
Publication of KR101748139B1 publication Critical patent/KR101748139B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/81Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0207Discounts or incentives, e.g. coupons or rebates
    • G06Q30/0224Discounts or incentives, e.g. coupons or rebates based on user history
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/74Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/741Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Signal Processing (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Game Theory and Decision Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치 및 방법에 관한 것으로, 카메라가 포착 또는 촬영한 영상 및 상기 영상의 키점 정보 중 적어도 하나를 수신하고 상기 카메라로 촬영 추천 여부 및 영상 품질 정보 중 적어도 하나를 송신하는 통신부, 상기 카메라로부터 수신한 영상에서 키점 정보를 추출하는 키점 추출부, 상기 키점 정보를 저장된 다른 영상 및 상기 통신부가 수신한 다른 영상 중 적어도 하나의 키점 정보와 비교하여 유사도를 산출하는 유사도 산출부, 상기 유사도에 근거하여 상기 영상의 촬영 추천 여부의 결정 및 상기 영상 품질 정보의 산출 중 적어도 하나를 수행하는 제어부를 포함하고, 여러 카메라가 촬영하거나 포착하고 있는 영상을 비교하고 유사성을 판단하여 다른 카메라나 타인이 이미 촬영한 사진을 중복하여 촬영하는 것을 방지하거나 보다 품질이 높은 사진을 촬영하게 함으로써, 촬영의 효율성 및 촬영된 사진의 품질을 향상시킬 수 있다.

Description

복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치 및 방법{APPARATUS AND METHOD FOR IMAGE PROCESSING THAT MANAGES IMAGES FROM MULTIPLE CAMERAS}
본 발명은 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치 및 방법에 관한 것으로, 보다 상세하게는 여러 카메라가 촬영하거나 포착하고 있는 영상을 비교하고 유사성을 판단하여 촬영의 효율성 및 촬영된 사진의 품질을 향상시키는 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치 및 방법에 관한 것이다.
디지털 카메라, 캠코더 및 카메라 기능을 구비하는 휴대전화가 보급됨에 따라서 일상 생활에서 촬영되는 사진이 급격히 증가하고 있으며, 특히 카메라 기능을 구비하는 휴대전화의 보급에 따라 대부분의 사용자가 일상 생활에서 카메라를 휴대하게 되었다. 이에 따라, 여러 사용자가 모여 특정한 장소에서 사진을 촬영하는 경우 각 사용자가 모두 카메라를 휴대하여 사진을 촬영하게 되었으며, 이에 따라 각 사용자가 촬영하는 사진 중에는 서로 중복되는 사진이 증가할 뿐더러 각 사용자의 사진 기술이나 카메라의 성능 또는 사진 촬영시의 앵글에 따라 유사한 사진이 서로 다른 품질로 촬영되는 경우도 있다.
종래 사진 관리 도구들은 촬영 시간, 태그, 위치 정보, 색상, 이벤트등의 정보에 따라 사진들을 분류하고 정리하는 기능을 제공하였으나, 실시간으로 서로 다른 사용자가 촬영하는 사진 또는 사용자가 이미 촬영한 사진 중에서 중복되는 사진을 관리하는 기능은 미흡한 바, 실시간으로 서로 다른 사용자가 촬영하는 사진 또는 사용자가 이미 촬영한 사진 중에서 중복되는 사진을 판별하고 중복되는 사진의 품질을 사용자에게 제시하여 사용자가 새로운 사진을 촬열할 지 선택할 수 있도록 하는 기능이 필요하다.
한국공개특허 제10-2012-0097396호(공개일: 2012.09.03., 발명의 명칭 : 이미지 처리 방법, 장치 또는 시스템, 청구범위 제1항)가 있다.
본 발명은, 여러 카메라가 촬영하거나 포착하고 있는 영상을 비교하고 유사성을 판단하여 촬영의 효율성 및 촬영된 사진의 품질을 향상시키는 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치 및 방법을 제공하는 데 그 목적이 있다.
본 발명의 일 실시예에 따른 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치는 카메라가 포착한 영상 및 상기 포착된 영상의 키점 정보 중 적어도 하나를 수신하고 상기 카메라로 촬영 추천 여부 및 영상 품질 정보 중 적어도 하나를 송신하는 통신부, 상기 카메라로부터 수신한 영상에서 키점 정보를 추출하는 키점 추출부, 상기 통신부가 수신한 키점 정보 및 상기 키점 추출부가 추출한 키점 정보 중 적어도 하나를, 적어도 하나의 다른 영상의 키점 정보와 비교하여 유사도를 산출하는 유사도 산출부 및 상기 유사도에 근거하여 상기 촬영 추천 여부의 결정 및 상기 영상 품질 정보의 산출 중 적어도 하나를 수행하는 제어부를 포함한다.
바람직하게는, 상기 포착한 영상, 상기 포착한 영상의 키점 정보 및 상기 포착한 영상의 품질 정보중 적어도 하나를 저장하는 저장부를 더 포함하고, 상기 제어부는 상기 카메라가 포착한 영상을 사용자가 촬영하는 경우 상기 포착된 영상 또는 상기 포착된 영상의 키점 정보 중 적어도 하나를 상기 저장부에 저장하도록 제어한다.
바람직하게는, 상기 유사도 산출부는 키점 매칭, 히스토그램 비교, 이진 디스크립터 비교 및 의미론적 텍스톤 포레스트 중 적어도 하나를 사용하여 상기 유사도를 산출한다.
바람직하게는, 상기 제어부는 상기 유사도가 기 설정된 기준치 미만인 경우 상기 포착한 영상의 촬영 추천을 결정한다.
바람직하게는, 상기 제어부는 상기 유사도가 기 설정된 기준치 이상인 경우 상기 포착된 영상과 비교된 다른 영상의 품질 정보를 산출한다.
본 발명의 일 실시예에 따른 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 방법은 통신부가 카메라가 포착한 영상 및 상기 포착된 영상의 키점 정보 중 적어도 하나를 수신하는 단계, 키점 추출부가 상기 통신부가 상기 포착된 영상을 수신한 경우 상기 키점 정보를 추출하는 단계, 유사도 산출부가 상기 통신부가 수신한 키점 정보 및 상기 키점 추출부가 추출한 키점 정보 중 적어도 하나를, 적어도 하나의 다른 영상의 키점 정보와 비교하여 유사도를 산출하는 단계, 제어부가 상기 유사도에 근거하여 상기 촬영 추천 여부의 결정 및 상기 영상 품질 정보의 산출 중 적어도 하나를 수행하는 단계 및 통신부가 상기 카메라로 촬영 추천 여부 및 영상 품질 정보 중 적어도 하나를 송신하는 단계를 포함한다.
바람직하게는, 상기 통신부가 상기 촬영 추천 여부 및 영상 품질 정보 중 적어도 하나를 송신하는 단계 이후, 상기 제어부가 상기 카메라가 포착한 영상을 사용자가 촬영하는 경우 상기 포착된 영상, 상기 포착된 영상의 키점 정보 및 상기 포착한 영상의 품질 정보 중 적어도 하나를 저장부에 저장하도록 제어하는 단계를 더 포함한다.
본 발명에 따르면, 여러 카메라가 촬영하거나 포착하고 있는 영상을 비교하고 유사성을 판단하여 다른 카메라나 타인이 이미 촬영한 사진을 중복하여 촬영하는 것을 방지하거나 보다 품질이 높은 사진을 촬영하게 함으로써, 촬영의 효율성 및 촬영된 사진의 품질을 향상시킬 수 있다.
도 1은 본 발명의 일 실시예에 따른 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치의 블록도이다.
도 2는 본 발명의 다른 실시예에 따른 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 방법의 동작을 도시한 순서도이다.
이하에서는 본 발명에 따른 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치 및 방법을 첨부된 도면들을 참조하여 상세하게 설명한다. 이러한 과정에서 도면에 도시된 선들의 두께나 구성요소의 크기 등은 설명의 명료성과 편의상 과장되게 도시되어 있을 수 있다. 또한, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례에 따라 달라질 수 있다. 그러므로, 이러한 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 일 실시예에 따른 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치의 블록도이다.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치는 통신부(100), 키점(Key Point) 추출부(200), 유사도 산출부(300), 제어부(400) 및 저장부(500)를 포함하여 이루어질 수 있다.
통신부(100)는 카메라(600)가 포착한 영상 및 포착된 영상의 키점 정보 중 적어도 하나를 수신하고 카메라(600)로 촬영 추천 여부 및 영상 품질 정보 중 적어도 하나를 송신한다. 이 때 통신부(100)는 복수 개의 카메라(600)와 통신하여 복수의 사용자가 각자 포착하거나 촬영한 영상들을 제어부(400) 및 유사도 산출부(300)가 비교할 수 있도록 할 수 있다. 또한 이 때 통신부(100)는 카메라(600)와 유선 및 무선으로 통신할 수 있다. 즉, 통신부(100)는 본 발명에 따른 영상 처리 장치 외부에 분리된 카메라(600) 또는 카메라(600)를 구비하는 휴대 전화 등 모바일 기기와 통신할 수도 있고, 본 발명에 따른 영상 처리 장치와 일체형으로 설치된 카메라(600) 또는 카메라(600)를 구비하는 휴대 전화와 유선으로 통신할 수도 있다. 즉, 본 발명에 따른 영상 처리 장치는 카메라(600)와 독립한 기기로 구현될 수도 있고, 카메라(600) 또는 카메라(600)를 구비하는 모바일 기기 내부에 구현될 수도 있다. 또한 이 때 통신부(100)가 송신하는 포착된 영상은 카메라가 제공하는 최대 해상도의 영상이 아닌 다른 카메라(100)가 포착 또는 촬영한 영상들 및 저장되어 있는 영상들과 비교하여 촬영 여부를 결정할 수 있도록 압축되거나 해상도를 축소한 영상일 수 있다.
키점 추출부(200)는 카메라(600)로부터 수신한 영상에서 키점 정보를 추출한다. 이 때 키점은 카메라가 촬영 또는 포착한 영상에서 에지(Edge) 또는 코너(Corner) 등의 중요 부분을 포함할 수 있다. 또한 이러한 키점들은 영상의 스케일(Scale), 회전(Rotation) 및 조명 조건에 영향을 받지 않는 스케일 고정 요소 변환(Scale-Invariant Feature Transform, SIFT) 키점일 수 있다. 또한 키점 정보는 영상에서 키점의 위치, 키점의 색상, 명도, 키점 주변부의 강도(Intensity) 정보 및 영상의 색상 히스토그램, 텍스춰 방향(Texture Direction) 히스토그램 및 텍스춰 스케일(Texture Scale) 히스토그램 정보를 포함할 수 있다. 이 때 주어진 2차원 영상에서 키점을 추출하는 방법 및 상기 키점 정보를 추출하는 방법은 당업자에게 알려져 있다.
유사도 산출부(300)는 통신부(100)가 수신한 키점 정보 및 키점 추출부(200)가 추출한 키점 정보 중 적어도 하나를, 적어도 하나의 다른 영상의 키점 정보와 비교하여 유사도를 산출한다. 이 때 유사도 산출부(300)는 카메라(600)가 영상 자체를 송출한 경우에는 수신한 영상으로부터 키점 추출부(200)가 추출한 키점 정보를 사용할 수 있고, 카메라(600)가 포착한 영상으로부터 추출한 키점 정보를 송출한 경우에는 통신부(100)가 수신한 키점 정보를 사용할 수 있다.
또한 유사도 산출부(300)는 키점 매칭(Keypoint Matching), 히스토그램 비교(Histogram Method), 이진 디스크립터(Binary Descriptor) 비교 및 의미론적 텍스톤 포레스트(Semantic Texton Forests) 중 적어도 하나를 사용하여 상기 유사도를 산출할 수 있다. 이 때, 키점 매칭은 상술한 키점 정보에 포함되는 사진의 중요 부분들인 에지 또는 코너만 영상에서 추출하여 비교하는 방법이다. 상술한 바와 같이 특히 SIFT 키점을 사용할 수 있다. 히스토그램 비교 방법은 적색, 녹색, 청색, 텍스춰 방향 및 텍스춰 스케일 등의 히스토그램을 영상에서 추출하여 그 유사성을 비교하는 방법이다. 이 때, 선택한 히스토그램에 따라서 추출한 특징의 d, green, blue, texture direction, texture scale 등이 있다. 이 히스토그램의 유사성을 비교한다. 선택한 히스토그램에 따라서 스케일링 또는 회전 등의 영상 처리시 히스토그램이 변화하는 특성이 달라질 수 있다. 의미론적 텍스톤 포레스트는 키점을 추출해 낸 후 여러 개의 결정 트리(Decision Tree)를 사용해서 영상을 분류하고 분류 결과를 통하여 영상을 비교하는 방법이다. 이진 디스크립터 비교는 키점 주위의 각 부의 강도를 비교하여 이진 스트링(Binary String)으로 변환하고 이에 대한 해밍 거리(Hamming Distance)를 구하여 각 영상 사이의 유사성을 판단하는 방법이다. 키점 매칭, 히스토그램 비교, 이진 디스크립터 비교 및 의미론적 텍스톤 포레스트의 각 알고리즘을 수행하는 세부적인 사항은 당업자에게 알려져 있으므로 여기서는 생략한다.
제어부(400)는 유사도에 근거하여 촬영 추천 여부의 결정 및 상기 영상 품질 정보의 산출 중 적어도 하나를 수행한다. 이 때 제어부(400)는 유사도가 기 설정된 기준치 미만인 경우 상기 포착한 영상의 촬영 추천을 결정하고, 유사도가 기 설정된 기준치 이상인 경우 상기 포착된 영상과 비교된 다른 영상의 품질 정보를 산출할 수 있다. 즉, 유사도가 기 설정된 기준치 미만으로, 현재 카메라(600)가 포착한 영상이 이미 촬영되어 저장한 다른 영상이나, 또한 다른 카메라(600)가 포착하거나 촬영한 영상과 유사하지 않다고 판단된 경우, 제어부(400)는 포착된 영상의 촬영 추천을 결정하고, 이러한 촬영 추천이 통신부(100)를 통하여 카메라(600)로 송신되어, 카메라(600)가 사용자에게 현재 포착된 영상의 촬영 추천을 표시할 수 있다. 또한 유사도가 기 설정된 기준치 이상인 경우, 제어부(400)는 현재 포착된 영상과 비교하여 유사하다고 판단된 영상의 품질 정보를 산출하여 통신부(100)를 통하여 카메라(600)로 전송하여, 카메라(600)가 비교 대상 영상의 품질 정보를 사용자에게 표시하여 사용자가 현재 포착된 영상을 촬영할 지 여부를 결정할 수 있도록 할 수 있다. 이 때 현재 포착된 영상과 비교되는 영상의 품질 정보에는 영상의 해상도, 영상의 밝기 및 통신부(100)가 수신한 압축 또는 축소된 영상이 포함될 수 있다.
저장부(500)는 포착한 영상 및 영상의 키점 정보 중 적어도 하나를 저장할 수 있다. 이 때 제어부(400)는 카메라가 포착한 영상을 사용자가 촬영하는 경우 포착된 영상, 포착된 영상의 키점 정보 및 포착된 영상의 품질 정보 중 적어도 하나를 저장부(400)에 저장하도록 제어할 수 있다. 즉, 상술한 바와 같이 유사도를 고려하여 현재 포착된 영상이 저장된 영상이나 다른 카메라(600)에 의하여 포착된 영상과 유사하지 않다고 판단되는 경우 및 설사 유사하더라도 사용자가 통신부(100)를 통하여 수신한 압축 또는 축소된 비교 대상 영상 또는 비교 대상 영상의 품질 정보를 통하여 현재 포착한 영상을 촬영하겠다고 결정한 경우에 사용자가 현재 포착한 영상을 촬영하면, 카메라(600)는 현재 포착 영상을 촬영하였다는 신호를 통신부(100)로 송신할 수 있고, 통신부(100)를 통하여 제어부(400)가 영상이 촬영되었다는 신호를 수신하면, 제어부(400)는 현재 촬영된 영상과 관련한 정보를 저장부(500)에 저장할 수 있다. 이러한 저장부에 저장되는 정보는, 포착한 영상 자체 및 키점 정보를 포함할 수 있으며, 또한 이후 촬영을 위하여 카메라(600)에 의하여 포착되는 다른 영상과 비교하기 위한 영상의 품질 정보도 포함할 수 있다.
도 2는 본 발명의 다른 실시예에 따른 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 방법의 동작을 도시한 순서도이다. 도 2에 따라 본 발명의 다른 실시예에 따른 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 방법의 동작을 설명한다.
먼저, 통신부(100)가 카메라(600)가 포착한 영상 및 상기 포착된 영상의 키점 정보 중 적어도 하나를 수신하고(S110), 키점 추출부(200)가 상기 통신부가 상기 포착된 영상을 수신한 경우 상기 키점 정보를 추출한다(S120). 이 때, 상술한 바와 같이, 본 발명에 따른 영상 처리 장치는 카메라(600)와 독립한 기기로 구현될 수도 있고, 카메라(600) 또는 카메라(600)를 구비하는 모바일 기기 내부에 구현될 수도 있다. 또한 상술한 바와 같이 키점 정보는 영상에서 키점의 위치, 키점의 색상, 명도, 키점 주변부의 강도(Intensity) 정보 및 영상의 색상 히스토그램, 텍스춰 방향(Texture Direction) 히스토그램 및 텍스춰 스케일(Texture Scale) 히스토그램 정보를 포함할 수 있다.
이어서, 유사도 산출부(300)가 상술한 키점 매칭, 히스토그램 비교, 이진 디스크립터 비교 및 의미론적 텍스톤 포레스트 중 적어도 하나를 유사도를 산출하기 위한 영상 비교 알고리즘으로 선택한다(S130). 이후, 유사도 산출부(300)는 통신부(100)가 수신한 키점 정보 및 상기 키점 추출부가 추출한 키점 정보 중 적어도 하나를, 적어도 하나의 다른 영상의 키점 정보와 비교하여 유사도를 산출하고(S140), 산출한 유사도가 기 설정된 기준치 미만인지 판단한다(S150). 이 때 유사도 산출부(300)는 카메라(600)가 영상 자체를 송출한 경우에는 수신한 영상으로부터 키점 추출부(200)가 추출한 키점 정보를 사용할 수 있고, 카메라(600)가 포착한 영상으로부터 추출한 키점 정보를 송출한 경우에는 통신부(100)가 수신한 키점 정보를 사용할 수 있다.
이 때, 유사도가 기 설정된 기준치 이상이라고 판단한 경우, 제어부(400)는 포착된 영상과 비교된 다른 영상의 품질 정보를 산출한다(S160). 또한 이후 통신부(100)가 산출된 영상 품질 정보를 카메라(600)로 송신한다.
만일 상기 단계 (S150)에서 유사도가 기 설정된 기준치 미만이라고 판단한 경우, 제어부는 포착한 영상의 촬영 추천을 결정하고(S180), 통신부(100)가 촬영 추천 여부를 카메라(600)로 송신한다.
즉, 제어부(400)는 유사도에 근거하여 촬영 추천 여부의 결정 및 영상 품질 정보의 산출 중 적어도 하나를 수행하고, 이후, 통신부(100)가 상기 카메라로 촬영 추천 여부 및 영상 품질 정보 중 적어도 하나를 송신할 수 있다. 상술한 바와 같이, 유사도가 기 설정된 기준치 미만으로, 현재 카메라(600)가 포착한 영상이 이미 촬영되어 저장한 다른 영상이나, 또한 다른 카메라(600)가 포착하거나 촬영한 영상과 유사하지 않다고 판단된 경우, 제어부(400)는 포착된 영상의 촬영 추천을 결정하고, 이러한 촬영 추천이 통신부(100)를 통하여 카메라(600)로 송신되어, 카메라(600)가 사용자에게 현재 포착된 영상의 촬영 추천을 표시할 수 있다. 또한 유사도가 기 설정된 기준치 이상인 경우, 제어부(400)는 현재 포착된 영상과 비교하여 유사하다고 판단된 영상의 품질 정보를 산출하여 통신부(100)를 통하여 카메라(600)로 전송하여, 카메라(600)가 비교 대상 영상의 품질 정보를 사용자에게 표시하여 사용자가 현재 포착된 영상을 촬영할 지 여부를 결정할 수 있도록 할 수 있다. 이 때 현재 포착된 영상과 비교되는 영상의 품질 정보에는 영상의 해상도, 영상의 밝기 및 통신부(100)가 수신한 압축 또는 축소된 영상이 포함될 수 있다.
이어서, 제어부(400)는 사용자가 현재 포착한 영상을 촬영하였는지 여부를 판단한다(S190). 이 때, 만일 카메라(600)가 포착한 영상을 사용자가 촬영하는 경우 포착된 영상, 포착된 영상의 키점 정보 및 포착한 영상의 품질 정보 중 적어도 하나를 저장부(500)에 저장하도록 제어하고(S200) 프로세스를 종료한다. 만일 단계(S190)에서 사용자가 포착한 영상을 촬영하지 않았다고 판단하는 경우 제어부(400) 프로세스를 종료한다. 상술한 바와 같이, 이러한 저장부(500)에 저장되는 정보는, 포착한 영상 자체 및 키점 정보를 포함할 수 있으며, 또한 이후 촬영을 위하여 카메라(600)에 의하여 포착되는 다른 영상과 비교하기 위한 영상의 품질 정보도 포함할 수 있다.
이상 살펴본 바와 같이 본 발명에 따르면, 여러 카메라가 촬영하거나 포착하고 있는 영상을 비교하고 유사성을 판단하여 다른 카메라나 타인이 이미 촬영한 사진을 중복하여 촬영하는 것을 방지하거나 보다 품질이 높은 사진을 촬영하게 함으로써, 촬영의 효율성 및 촬영된 사진의 품질을 향상시킬 수 있다.
본 발명은 도면에 도시된 실시예를 참고로 하여 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술이 속하는 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 기술적 보호범위는 아래의 특허청구범위에 의해서 정하여져야 할 것이다.
100 : 통신부 200 : 키점 추출부
300 : 유사도 산출부 400 : 제어부
500 : 저장부 600 : 카메라

Claims (10)

  1. 복수의 카메라가 포착한 영상 및 상기 포착된 영상의 키점 정보 중 적어도 하나를 수신하고 상기 카메라로 촬영 추천 여부 및 영상 품질 정보 중 적어도 하나를 송신하는 통신부;
    상기 카메라로부터 수신한 영상에서 키점 정보를 추출하는 키점 추출부;
    상기 통신부가 수신한 키점 정보 및 상기 키점 추출부가 추출한 키점 정보 중 적어도 하나를, 적어도 하나의 다른 영상의 키점 정보와 비교하여 유사도를 산출하는 유사도 산출부;
    상기 유사도에 근거하여 상기 촬영 추천 여부의 결정 및 상기 영상 품질 정보의 산출 중 적어도 하나를 수행하는 제어부; 및
    상기 포착한 영상, 상기 포착한 영상의 키점 정보 및 상기 포착한 영상의 품질 정보중 적어도 하나를 저장하는 저장부를 포함하고,
    상기 제어부는 상기 카메라가 포착한 영상을 사용자가 촬영하는 경우 상기 포착된 영상 또는 상기 포착된 영상의 키점 정보 중 적어도 하나를 상기 저장부에 저장하도록 제어하며, 상기 유사도가 기 설정된 기준치 미만인 경우 상기 포착한 영상의 촬영 추천을 결정하고, 상기 유사도가 기 설정된 기준치 이상인 경우 상기 포착된 영상과 비교된 다른 영상의 품질 정보를 산출하며,
    상기 유사도 산출부는 키점 매칭, 히스토그램 비교, 이진 디스크립터 비교 및 의미론적 텍스톤 포레스트 중 적어도 하나를 사용하여 상기 유사도를 산출하고,
    상기 키점 정보는 키점의 위치, 키점의 색상, 명도, 키점 주변부의 강도(Intensity) 정보 및 영상의 색상 히스토그램, 텍스춰 방향(Texture Direction) 히스토그램 및 텍스춰 스케일(Texture Scale) 히스토그램 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 영상 처리 장치.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 통신부가 복수의 카메라가 포착한 영상 및 상기 포착된 영상의 키점 정보 중 적어도 하나를 수신하는 단계;
    키점 추출부가 상기 통신부가 상기 포착된 영상을 수신한 경우 상기 키점 정보를 추출하는 단계;
    유사도 산출부가 상기 통신부가 수신한 키점 정보 및 상기 키점 추출부가 추출한 키점 정보 중 적어도 하나를, 적어도 하나의 다른 영상의 키점 정보와 비교하여 유사도를 산출하는 단계;
    제어부가 상기 유사도에 근거하여 촬영 추천 여부의 결정 및 영상 품질 정보의 산출 중 적어도 하나를 수행하는 단계;
    통신부가 상기 카메라로 촬영 추천 여부 및 영상 품질 정보 중 적어도 하나를 송신하는 단계; 및
    상기 제어부가 상기 카메라가 포착한 영상을 사용자가 촬영하는 경우 상기 포착된 영상, 상기 포착된 영상의 키점 정보 및 상기 포착한 영상의 품질 정보 중 적어도 하나를 저장부에 저장하도록 제어하는 단계를 포함하며,
    상기 제어부는 상기 유사도가 기 설정된 기준치 미만인 경우 상기 포착한 영상의 촬영 추천을 결정하고, 상기 유사도가 기 설정된 기준치 이상인 경우 상기 포착된 영상과 비교된 다른 영상의 품질 정보를 산출하고,
    상기 유사도 산출부는 키점 매칭, 히스토그램 비교, 이진 디스크립터 비교 및 의미론적 텍스톤 포레스트 중 적어도 하나를 사용하여 상기 유사도를 산출하는 것을 특징으로 하는 영상 처리 방법.
  7. 삭제
  8. 삭제
  9. 삭제
  10. 삭제
KR1020140195473A 2014-12-31 2014-12-31 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치 및 방법 KR101748139B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140195473A KR101748139B1 (ko) 2014-12-31 2014-12-31 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140195473A KR101748139B1 (ko) 2014-12-31 2014-12-31 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20160081530A KR20160081530A (ko) 2016-07-08
KR101748139B1 true KR101748139B1 (ko) 2017-06-16

Family

ID=56503757

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140195473A KR101748139B1 (ko) 2014-12-31 2014-12-31 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101748139B1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102187016B1 (ko) * 2016-11-25 2020-12-04 주식회사 케이티 타임 슬라이스 영상을 제공하는 사용자 단말 및 영상 제공 서버
KR102614026B1 (ko) 2019-01-29 2023-12-13 삼성전자주식회사 복수의 렌즈를 구비하는 전자 장치 및 그 제어 방법
KR102211760B1 (ko) * 2020-01-10 2021-02-02 한국항공대학교산학협력단 과거 촬영 이미지에 기초한 촬영 방식 추천 장치 및 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005117190A (ja) * 2003-10-03 2005-04-28 Kureo:Kk 撮影支援プログラム、撮影支援方法および撮影支援装置
JP2006311018A (ja) * 2005-04-27 2006-11-09 Ricoh Co Ltd 撮影装置及び印刷方法
JP2008011316A (ja) * 2006-06-30 2008-01-17 Casio Comput Co Ltd カメラ装置及びカメラ装置制御プログラム
JP2009055088A (ja) * 2007-08-23 2009-03-12 Nec Corp 撮影支援システム
JP2010278927A (ja) * 2009-05-29 2010-12-09 Sharp Corp 撮影装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2510460A4 (en) 2009-12-10 2013-05-08 Nokia Corp PROCESS, DEVICE OR PICTURE PROCESSING SYSTEM

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005117190A (ja) * 2003-10-03 2005-04-28 Kureo:Kk 撮影支援プログラム、撮影支援方法および撮影支援装置
JP2006311018A (ja) * 2005-04-27 2006-11-09 Ricoh Co Ltd 撮影装置及び印刷方法
JP2008011316A (ja) * 2006-06-30 2008-01-17 Casio Comput Co Ltd カメラ装置及びカメラ装置制御プログラム
JP2009055088A (ja) * 2007-08-23 2009-03-12 Nec Corp 撮影支援システム
JP2010278927A (ja) * 2009-05-29 2010-12-09 Sharp Corp 撮影装置

Also Published As

Publication number Publication date
KR20160081530A (ko) 2016-07-08

Similar Documents

Publication Publication Date Title
CN105472239B (zh) 照片处理方法及装置
US8174611B2 (en) Digital image segmentation using flash
WO2018103314A1 (zh) 一种拍照方法、装置、终端及存储介质
US20120148118A1 (en) Method for classifying images and apparatus for the same
WO2016127478A1 (zh) 一种图像处理方法、装置和终端
AU2017261537A1 (en) Automated selection of keeper images from a burst photo captured set
KR20140016401A (ko) 이미지 촬상 방법 및 장치
CN108241645B (zh) 图像处理方法及装置
JP2009531873A (ja) デジタルイメージの転送
JP6340347B2 (ja) 画像処理装置、画像処理方法、プログラムおよび記録媒体
JP5662670B2 (ja) 画像処理装置、画像処理方法、及びプログラム
US9426385B2 (en) Image processing based on scene recognition
WO2016011589A1 (zh) 图像分类方法和图像分类装置
KR102499560B1 (ko) 검출 장치 및 검출 방법
KR101748139B1 (ko) 복수의 카메라가 촬영한 영상을 관리하는 영상 처리 장치 및 방법
CN108600636A (zh) 智能拍摄方法、智能拍摄装置
CN104639819A (zh) 一种便携终端及其实现拍照的方法
KR102503872B1 (ko) 정보 처리 장치, 정보 처리 방법 및 프로그램
US10880478B2 (en) Camera, system and method of selecting camera settings
CN110381247B (zh) 摄像装置以及摄像装置的控制方法
JP2015008385A (ja) 画像選択装置、撮像装置および画像選択プログラム
CN111327827A (zh) 拍摄场景识别控制方法、装置及拍摄设备
US20170200062A1 (en) Method of determination of stable zones within an image stream, and portable device for implementing the method
CN112887610A (zh) 拍摄方法、装置、电子设备及存储介质
CN108810326A (zh) 一种拍照方法、装置及移动终端

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant