KR102173109B1 - 디지털 영상 처리 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 디지털 영상 처리 장치 - Google Patents

디지털 영상 처리 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 디지털 영상 처리 장치 Download PDF

Info

Publication number
KR102173109B1
KR102173109B1 KR1020140119363A KR20140119363A KR102173109B1 KR 102173109 B1 KR102173109 B1 KR 102173109B1 KR 1020140119363 A KR1020140119363 A KR 1020140119363A KR 20140119363 A KR20140119363 A KR 20140119363A KR 102173109 B1 KR102173109 B1 KR 102173109B1
Authority
KR
South Korea
Prior art keywords
rectangular area
image
main
effective
determining
Prior art date
Application number
KR1020140119363A
Other languages
English (en)
Other versions
KR20160029589A (ko
Inventor
송원석
강태훈
최명규
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020140119363A priority Critical patent/KR102173109B1/ko
Priority to US14/842,116 priority patent/US9984435B2/en
Priority to CN202011474412.0A priority patent/CN112672041A/zh
Priority to CN201510563754.2A priority patent/CN105407306B/zh
Publication of KR20160029589A publication Critical patent/KR20160029589A/ko
Application granted granted Critical
Publication of KR102173109B1 publication Critical patent/KR102173109B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
    • G06V10/235—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on user input or interaction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/24—Aligning, centring, orientation detection or correction of the image
    • G06V10/247—Aligning, centring, orientation detection or correction of the image by affine transforms, e.g. correction due to perspective effects; Quadrilaterals, e.g. trapezoids

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

일 실시 예에 따르면, 프리뷰 영상을 수신하는 단계; 상기 프리뷰 영상에서 사각 영역을 검출하고, 상기 사각 영역에 대응되는 좌표 정보를 획득하는 단계;
상기 프리뷰 영상에서 검출된 적어도 하나 이상의 사각 영역 중에 메인 사각 영역을 결정하는 단계; 영상을 촬영하는 단계; 및 상기 메인 사각 영역에 대응되는 상기 좌표 정보를 이용하여, 상기 영상을 원근 변환하여 변환 영상을 생성하는 단계; 를 포함하는 디지털 영상 처리 방법을 개시한다.

Description

디지털 영상 처리 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 디지털 영상 처리 장치{Method of processing a digital image, Computer readable storage medium of recording the method and digital photographing apparatus}
본 발명은 프리뷰 영상에서 미리 사각 영역을 검출하여, 영상 촬영 후에 원근 변환(Perspective Transform)을 용이하게 하는 디지털 영상 처리 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 디지털 영상 처리 장치에 관한 것이다.
종래에는 디지털 영상 처리 장치에서, 영상에 대하여 원근 변환(Perspective Transform)을 하기 위해서는, 촬영 영상에서 사각 영역을 검출하고 이를 이용하여 원근 변환의 영상 처리를 수행하여 원근 변환 영상을 생성할 수 밖에 없었다.
따라서, 사용자는 어떤 영상에 대하여 원근 변환을 수행하고 싶으면, 영상을 촬영한 이후에 사각 영역을 검출하고 이를 이용하여 영상 처리를 하게 됨으로써, 시간적으로 지연이 있었다.
일 실시 예에 따른 디지털 영상 처리 방법은, 프리뷰 영상에서 미리 사각 영역을 검출하여, 영상 촬영 후에 원근 변환(Perspective Transform)을 용이하게 하는 디지털 영상 처리 방법을 제공한다.
일 실시 예에 따른 디지털 영상 처리 방법은, 프리뷰 영상을 수신하는 단계;
상기 프리뷰 영상에서 사각 영역을 검출하고, 상기 사각 영역에 대응되는 좌표 정보를 획득하는 단계; 상기 프리뷰 영상에서 검출된 적어도 하나 이상의 사각 영역 중에 메인 사각 영역을 결정하는 단계; 영상을 촬영하는 단계; 및
상기 메인 사각 영역에 대응되는 상기 좌표 정보를 이용하여, 상기 영상을 원근 변환하여 변환 영상을 생성하는 단계; 를 포함하는 디지털 영상 처리 방법을 제공한다.
일 실시 예에 따른 디지털 영상 처리 방법은, 상기 메인 사각 영역을 결정하는 단계; 는 상기 프리뷰 영상에서 검출된 사각 영역 중에 적어도 하나 이상의 유효 사각 영역을 결정하는 단계; 및 상기 유효 사각 영역 중에 소정의 결정 기준에 따라 상기 메인 사각 영역을 결정하는 단계; 를 더 포함하는 디지털 영상 처리 방법을 제공한다.
일 실시 예에 따른 디지털 영상 처리 방법은, 상기 유효 사각 영역을 결정하는 단계;는 상기 프리뷰 영상의 연속적인 복수의 영상 프레임마다 각각 획득된 상기 좌표 정보를 필터링하여 상기 유효 사각 영역을 결정할 수 있다.
일 실시 예에 따른 디지털 영상 처리 방법은, 상기 유효 사각 영역을 결정하는 단계;는 상기 프리뷰 영상에서 검출된 복수의 사각 영역의 각각의 중점간의 거리가 미리 결정된 임계 값 이하인 경우, 상기 복수의 사각 영역 중에서 가장 큰 크기를 가지는 사각 영역을 상기 유효 사각 영역으로 결정할 수 있다.
일 실시 예에 따른 디지털 영상 처리 방법은, 상기 메인 사각 영역을 결정하는 단계;는 상기 각각의 유효 사각 영역을 정의하는 파라미터의 값에 기초하여 상기 유효 사각 영역 중에 상기 메인 사각 영역을 결정할 수 있다.
일 실시 예에 따른 디지털 영상 처리 방법은, 상기 메인 사각 영역을 결정하는 단계;는 상기 유효 사각 영역 중에 사용자의 입력에 기초하여 상기 메인 사각 영역을 결정할 수 있다.
일 실시 예에 따른 상기 유효 사각 영역과 상기 메인 사각 영역는 상기 프리뷰 영상과 함께 디스플레이부에 표시될 수 있다.
일 실시 예에 따른 디지털 영상 처리 방법은, 상기 프리뷰 영상에서 검출된 사각 영역에 대응되는 복수의 썸 네일 영상을 생성하는 단계; 및 상기 생성된 복수의 썸 네일 영상을 상기 프리뷰 영상과 함께 표시하는 단계; 를 포함하는 디지털 영상 처리 방법을 제공한다.
일 실시 예에 따른 디지털 영상 처리 방법은, 상기 영상을 촬영 하는 단계; 는 상기 메인 사각 영역에 대응되는 상기 좌표 정보를 이용하여, 상기 메인 사각 영역에 초점을 맞추어 영상을 촬영할 수 있다.
일 실시 예에 따른 디지털 영상 처리 방법은, 상기 영상을 촬영하는 단계는;
상기 프리뷰 영상에서 검출된 복수의 사각 영역에 각각 초점을 맞추어 복수의 영상을 촬영하는 단계; 를 포함하고, 상기 영상을 원근 변환하여 변환 영상을 생성하는 단계;는 상기 복수의 영상 중에 상기 메인 사각 영역에 초점을 맞추어 촬영된 영상을 선택하는 단계; 및 상기 메인 사각 영역에 대응되는 상기 좌표 정보를 이용하여, 상기 선택된 영상을 원근 변환하여 변환 영상을 생성하는 단계; 를 포함하는 디지털 영상 처리 방법을 제공한다.
일 실시 예에 따른 디지털 영상 처리 장치는 프리뷰 영상을 수신하는 영상 수신부; 상기 영상 수신부에서 수신된 상기 프리뷰 영상에서 사각 영역을 검출하고, 상기 사각 영역에 대응되는 좌표 정보를 획득하는 사각 영역 검출부; 상기 사각 영역 검출부에서 검출된 적어도 하나 이상의 사각 영역 중에 메인 사각 영역을 결정하는 사각 영역 판단부; 영상을 촬영하는 영상 촬영부; 상기 영상 촬영부에서 촬영된 상기 영상을 원근 변환하여 변환 영상을 생성하는 변환 영상 생성부; 및 상기 사각 영역 판단부에서 결정된 상기 메인 사각 영역에 대응되는 상기 좌표 정보를 이용하여, 상기 변환 영상 생성부가 변환 영상을 생성하도록 제어하는 제어부; 를 포함할 수 있다.
일 실시 예에 따른 디지털 영상 처리 장치는 사각 영역 판단부는 상기 사각 영역 검출부에서 검출된 적어도 하나 이상의 사각 영역 중에 적어도 하나 이상의 유효 사각 영역을 결정하는 유효 사각 영역 판단부; 및 상기 유효 사각 영역 판단부에서 결정된 유효 사각 영역 중에 소정의 결정 기준에 따라 상기 메인 사각 영역을 결정하는 메인 사각 영역 판단부;를 더 포함할 수 있다.
일 실시 예에 따른 디지털 영상 처리 장치의 상기 유효 사각 영역 판단부는
상기 사각 영역 검출부에서 상기 프리뷰 영상의 연속적인 복수의 영상 프레임마다 각각 획득된 상기 좌표 정보를, 필터링 하여 상기 유효 사각 영역을 결정할 수 있다.
일 실시 예에 따른 디지털 영상 처리 장치의 상기 유효 사각 영역 판단부는
상기 사각 영역 검출부에서 검출된 복수의 사각 영역의 각각의 중점간의 거리가 미리 결정된 임계 값 이하인 경우, 상기 복수의 사각 영역 중에서 가장 큰 크기를 가지는 사각 영역을 상기 유효 사각 영역으로 결정할 수 있다.
일 실시 예에 따른 디지털 영상 처리 장치의 상기 메인 사각 영역 판단부는,
상기 유효 사각 영역 판단부에서 결정된 유효 사각 영역 중에, 상기 각각의 유효 사각 영역을 정의하는 파라미터의 값에 기초하여 상기 메인 사각 영역을 결정할 수 있다.
일 실시 예에 따른 디지털 영상 처리 장치의 상기 메인 사각 영역 판단부는 상기 유효 사각 영역 판단부에서 결정된 유효 사각 영역 중에, 사용자의 입력에 기초하여 상기 메인 사각 영역을 결정할 수 있다.
일 실시 예에 따른 디지털 영상 처리 장치의 상기 제어부는 상기 유효 사각 영역과 상기 메인 사각 영역을 상기 프리뷰 영상과 함께 디스플레이부에 표시되도록 제어할 수 있다.
일 실시 예에 따른 디지털 영상 처리 장치는 상기 사각 영역 판단부에서 검출된 사각 영역에 대응되는 복수의 썸 네일 영상을 생성하는 썸 네일 영상 생성부; 를 포함하고, 상기 제어부는 상기 썸 네일 영상 생성부에서 생성된 상기 복수의 썸 네일 영상을 상기 프리뷰 영상과 함께 디스플레이부에 표시하도록 제어할 수 있다.
일 실시 예에 따른 디지털 영상 처리 장치의 상기 영상 촬영부는 상기 메인 사각 영역 판단부에서 결정된 상기 메인 사각 영역에 대응되는 상기 좌표 정보를 이용하여, 상기 메인 사각 영역에 초점을 맞추어 영상을 촬영할 수 있다.
일 실시 예에 따른 디지털 영상 처리 장치의 상기 영상 촬영부는 상기 사각 영역 검출부에서 검출된 복수의 상기 사각 영역에 각각 초점을 맞추어 복수의 영상을 촬영하며, 상기 제어부는, 상기 사각 영역 판단부에서 결정된 상기 메인 사각 영역에 대응되는 상기 좌표 정보와, 상기 메인 사각 영역에 초점을 맞추어 촬영된 영상을 이용하여, 상기 변환 영상 생성부가 변환 영상을 생성하도록 제어할 수 있다.
일 실시 예에 따른 프로세서에 의해 도출되어 실행되었을 때, 다중 디지털 영상 처리 방법을 수행하는 컴퓨터 프로그램 코드들을 저장하는 컴퓨터 판독가능 저장매체에 있어서, 상기 다중 디지털 영상 처리 방법은, 프리뷰 영상을 수신하는 단계; 상기 프리뷰 영상에서 사각 영역을 검출하고, 상기 사각 영역에 대응되는 좌표 정보를 획득하는 단계; 상기 프리뷰 영상에서 검출된 적어도 하나 이상의 사각 영역 중에 메인 사각 영역을 결정하는 단계; 영상을 촬영하는 단계; 및 상기 메인 사각 영역에 대응되는 상기 좌표 정보를 이용하여, 상기 영상을 원근 변환하여 변환 영상을 생성하는 단계; 를 포함하는 컴퓨터 판독가능 저장매체를 제공한다.
도1 은 일 실시 예에 따른 프리뷰 영상에서 사각 영역을 검출하고, 촬영 영상에서 원근 변환을 수행하는 디지털 영상 처리 장치의 블록도이다.
도2 는 일 실시 예에 따른 프리뷰 영상에서 사각 영역을 검출하고, 촬영 영상에서 원근 변환을 수행하는 디지털 영상 처리 방법의 흐름도이다.
도3a 내지 도3b는 일 실시 예에 따른 디지털 영상 처리 장치가 프리뷰 영상에서 적어도 하나 이상의 사각 영역을 검출하여 디스플레이부에 표시하는 일 예를 도시한 도면이다.
도4 은 일 실시 예에 따른 프리뷰 영상에서 검출된 적어도 하나 이상의 사각 영역 중에서, 촬영 영상에서 원근 변환의 대상이 되는 메인 사각 영역을 결정하는 디지털 영상 처리 장치의 블록도이다.
도5 는 일 실시 예에 따른 프리뷰 영상에서 검출된 적어도 하나 이상의 사각 영역에서, 사용자가 원근 변환을 하려는 메인 사각 영역을 결정하는 디지털 영상 처리 방법의 흐름도이다.
도6 및 도7a 내지 도7b는 일 실시 예에 따른 디지털 영상 처리 장치가 프리뷰 영상에서 유효 사각 영역을 결정하는 다양한 예를 도시한 도면이다.
도8a 내지 도8b는 일 실시 예에 따른 디지털 영상 처리 장치가 프리뷰 영상에서 메인 사각 영역을 결정하여 디스플레이부에 표시하는 다양한 예를 도시한 도면이다.
도9 은 일 실시 예에 따른 프리뷰 영상에서 검출된 사각 영역에 대응되는 썸 네일 영상을 생성하는 디지털 영상 처리 장치의 블록도이다.
도10 는 일 실시 예에 따른 디지털 영상 처리 장치가 복수의 썸 네일 영상을 프리뷰 영상과 함께 디스플레이부에 표시하는 일 예를 도시한 도면이다.
도11 a 내지 도11b는 일 실시 예에 따른 디지털 영상 처리 장치가 프리뷰 영상에서 결정된 메인 사각 영역의 좌표 정보를 이용하여, 촬영 영상을 원근 변환하여 생성한 변환 영상을 디스플레이부에 표시하는 일 예를 도시한 도면이다.
도12 내지 도13 은 일 실시 예에 따른 프리뷰 영상에서 검출된 사각 영역에 초점을 맞추어 영상을 촬영하는 디지털 영상 처리 방법의 흐름도이다.
도14a 내지 도14c는 일 실시 예에 따른 디지털 영상 처리 장치가 프리뷰 영상에서 검출된 사각 영역에 초점을 맞추어 촬영한 영상을 원근 변환하여 생성한 변환 영상을 디스플레이부에 표시하는 일 예를 도시한 도면이다.
본 발명은 다양한 변형을 가할 수 있고 여러 가지 실시 예를 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하, 다양한 실시 예들은 첨부도면을 참조하여 상세히 설명하기로 하며, 첨부 도면을 참조하여 설명함에 있어, 동일하거나 대응하는 구성 요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
도1 은 일 실시 예에 따른 프리뷰 영상에서 사각 영역을 검출하고, 촬영 영상에서 원근 변환을 수행하는 디지털 영상 처리 장치의 블록도이다.
디지털 영상 처리 장치는 영상 수신부(10), 사각 영역 검출부(20), 사각 영역 판단부(30), 사각 영역 판단부(30), 영상 촬영부(40), 변환 영상 생성부(50), 디스플레이부(70), 사용자 입력부(60) 및 제어부(80)를 포함할 수 있다.
이하 상기 구성요소들에 대해 차례로 살펴본다.
일 실시 예에 따른 영상 수신부(10)는 프리뷰 영상을 수신한다.
예를 들면, 일 실시 예에 따른 프리뷰 영상은, 추후에 촬영 된 영상에 원근 변환의 영상 처리가 이루어 질 수 있도록, 사각형의 모양을 가진 피사체를 포함하는 영상일 수 있다.
일 실시 예에 따른 사각 영역 검출부(20)는 영상 수신부(10)에서 수신된 프리뷰 영상에서 사각 영역을 검출할 수 있다.
예를 들면, 일 실시 예에 따른 사각 영역이란, 프리뷰 영상에 포함된 사각형의 모양을 가진 피사체에 대응되는 것으로, 사각 영역에서 획득된 좌표 정보는 추후에 촬영 된 영상을 원근 변환(Perspective Transform)하는데 이용될 수 있다.
이 경우 프리뷰 영상으로부터 사각 영역을 검출하는 방법은 업계에서 통용되는 다양한 방법들이 있으므로, 프리뷰 영상으로부터 사각 영역 검출하는 방법이 특정 방법으로 한정되지 않음을 유의하여야 한다.
또한, 이 경우 일 실시 예에 따른 좌표 정보는 프리뷰 영상에서 검출된 사각 영역의 각 꼭지점에 대응되는 픽셀의 좌표 정보를 포함할 수 있다.
이에 관하여는 도3a 내지 도3b를 참조하여 후에 자세히 살펴보기로 한다.
일 실시 예에 따른 사각 영역 판단부(30)는 사각 영역 검출부(20)에서 검출된 적어도 하나 이상의 사각 영역 중에 메인 사각 영역을 결정할 수 있다.
예를 들면, 메인 사각 영역이란 프리뷰 영상에서 검출된 적어도 하나 이상의 사각 영역 중에서, 촬영 영상에서 원근 변환의 대상이 되는 사각 영역일 수 있다. 이 경우, 사각 영역 판단부(30)는 유효 사각 영역 판단부(30) 및 메인 사각 영역 판단부(30)를 더 포함할 수 있는 데, 이에 대해서는 도 4 내지 도7에서 자세히 설명하기로 한다.
또한, 메인 사각 영역은 사각 영역 검출부(20)에서 검출된 적어도 하나 이상의 사각 영역 중에서, 각각의 사각 영역을 정의하는 파라미터의 값에 기초하여 결정될 수 있다. 예를 들면, 사각 영역을 정의하는 파라미터의 값에는 사각 영역을 정의하는 크기, 사각 영역을 정의하는 왜곡 정도, 프리뷰 영상의 가운데를 기준으로 사각 영역이 떨어진 정도, 등이 포함될 수 있다.
또한, 메인 사각 영역은 사각 영역 검출부(20)에서 검출된 적어도 하나 이상의 사각 영역 중에서, 사용자의 입력에 기초하여 결정될 수 있다. 이 경우, 메인 사각 영역은 사용자의 의도에 따라, 사용자 입력에 기초하여 변경될 수도 있다.
이에 대해서는 도8a 내지 도8b에서 자세히 설명하기로 한다.
일 실시 예에 따른 영상 촬영부(40)는 영상 수신부(10)로부터 수신되는 프리뷰 영상을 촬영할 수 있다.
예를 들면, 영상 촬영부(40)로 촬영된 영상은 프리뷰 영상와 동일한 피사체를 포함할 수 있다.
또한, 영상 촬영부(40)는 메인 사각 영역 판단부(30)에서 결정된 메인 사각 영역에 대응되는 좌표 정보를 이용하여, 메인 사각 영역에 초점을 맞추어 영상을 촬영할 수 있다.
반면, 사각 영역 검출부(20)에서 검출된 복수의 사각 영역들의 깊이 정보(Depth)가 상이한 경우는, 영상 촬영부(40)는 각각의 사각 영역에 각각 초점을 맞춘 복수의 영상을 촬영할 수 있다. 이 경우, 복수의 사각 영역들의 깊이 정보가 상이하다는 것은, 사각 영역에서 검출된 에지의 크기에 기초하여 판단될 수 있다.
이에 대한 설명은 도10 내지 도12를 참조하여 자세하게 설명하도록 한다.
일 실시 예에 따른 변환 영상 생성부(50)는 영상 촬영부(40)에서 촬영된 영상을 원근 변환하여 변환 영상을 생성할 수 있다.
예를 들면, 변환 영상 생성부(50)는 사각 영역 판단부(30)에서 결정된 메인 사각 영역에 대응되는 좌표 정보를 이용하여, 영상 촬영부(40)에서 촬영된 영상을 원근 변환하여 변환 영상을 생성할 수 있다.
이에 따라, 일 실시 예에 따른 디지털 영상 처리 장치는 영상 촬영 전에, 프리뷰 영상에서 사각 영역을 검출함으로써 획득된 좌표 정보를 이용하여, 영상 촬영 후에 촬영된 영상에 원근 변환(Perspective Transform)을 신속하게 수행할 수 있다.
또한, 변환 영상 생성부(50)에서 생성된 변환 영상은 디스플레이부(70)에 표시될 수 있다. 이에 따라, 일 실시 예에 따른 디지털 영상 처리 장치는 사용자가 촬영 전에 원근 변환이 될 사각 영역을 프리뷰 영상에서 직접 확인할 수 있고, 영상을 촬영한 이후에는 바로 원근 변환의 영상 처리로 생성된 변환 영환을 확인할 수 있게 한다.
일 실시 예에 따른 디지털 영상 처리 장치의 전체 동작은 제어부(80)에 의해 통괄된다. 그리고 디지털 영상 처리 장치에는 사용자로부터의 전기적 신호를 발생시키는 키 등을 포함하는 사용자 입력부(60)가 구비된다. 이 사용자 입력부(60)로부터의 전기적 신호는 제어부(80)에 전달되어, 제어부(80)가 전기적 신호에 따라 디지털 영상 처리 장치를 제어할 수 있도록 한다
일 실시 예에 따른 제어부(80)는 사각 영역 판단부(30)에서 결정된 메인 사각 영역에 대응되는 좌표 정보를 이용하여, 변환 영상 생성부(50)가 촬영 영상을 이용하여 변환 영상을 생성하도록 제어할 수 있다.
이 경우, 제어부(80)는 사각 영역 판단부(30)에서 결정된 메인 사각 영역에 대응되는 좌표 정보와, 메인 사각 영역에 초점을 맞추어 촬영된 영상을 이용하여, 변환 영상 생성부(50)가 변환 영상을 생성하도록 제어할 수 있다.
일 실시 예에 따른 제어부(80)는 유효 사각 영역과 메인 사각 영역을 프리뷰 영상과 함께 디스플레이부(70)에 표시되도록 제어할 수 있다.
일 실시 예에 따른 제어부(80)는 썸 네일 영상 생성부(90)에서 생성된 복수의 썸 네일 영상을 프리뷰 영상과 함께 디스플레이부(70)에 표시하도록 제어할 수 있다.
일 실시 예에 따른 사용자 입력부(60)는 사용자가 디지털 영상 처리 장치의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(60)는 키 패드(key pad), 돔 스위치 (dome switch), 터치 패드(접촉식 정전 용량 방식, 압력식 저항막 방식, 적외선 감지 방식, 표면 초음파 전도 방식, 적분식 장력 측정 방식, 피에조 효과 방식 등), 조그 휠, 조그 스위치 등으로 구성될 수 있다. 특히, 터치 패드가 후술하는 디스플레이부(70)와 상호 레이어 구조를 이룰 경우, 이를 터치 스크린이라 부를 수 있다.
일 실시 예에 따른 사용자 입력부(60)는 사각 영역 검출부(20)에서 검출된 복수의 사각 영역 중에서 원근 변환의 대상이 되는 메인 사각 영역을 결정하는 신호를 입력 받을 수 있다.
또한, 일 실시 예에 따른 사용자 입력부(60)는 원근 변환의 대상이 되는 메인 사각 영역에 대응되는 좌표 정보를 변경하는 신호를 입력 받을 수 있다.
일 실시 예에 따른 디스플레이부(70)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.
디스플레이부(70)와 터치패드가 상호 레이어 구조를 이루어 터치 스크린으로 구성되는 경우, 디스플레이부(70)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치스크린은 터치 입력 위치, 터치된 면적뿐만 아니라 터치 입력 압력까지도 검출할 수 있도록 구성될 수 있다. 또한, 터치스크린은 상기 터치(real-touch) 뿐만 아니라 근접 터치(proximity touch)도 검출될 수 있도록 구성될 수 있다.
일 실시 예에 따른 디스플레이부(70)는 영상 수신부(10)에서 수신된 프리뷰 영상과, 썸네일 영상 생성부에서 생성된 썸네일 영상을 함께 표시할 수 있다.
예를 들면, 썸 네일 영상은 사각 영역 판단부(30)에서 검출된 사각 영역을 기초로 하여 생성될 수 있다. 이에 따라, 일 실시 예에 따른 디지털 영상 처리 장치는 사용자가 촬영 전에 원근 변환이 될 사각 영역을 프리뷰 영상에서 직접 확인할 수 있게 한다.
이에 대해서는 도 9 내지 도10에서 자세히 설명하도록 한다.
또한, 일 실시 예에 따른 디스플레이부(70)는 유효 사각 영역과 메인 사각 영역을 포함하는 사각 영역을 프리뷰 영상과 함께 표시할 수 있다.
이에 따라, 일 실시 예에 따른 디지털 영상 처리 장치는 사용자가 촬영 전에 원근 변환이 될 사각 영역을 프리뷰 영상에서 직접 확인할 수 있고, 사각 영역에 대한 편집도 가능하게 한다.
또한, 일 실시 예에 따른 디스플레이부(70)는 영상 촬영부(40)에서 촬영된 영상에 원근 변환을 수행하여 생성된 변환 영상을 표시할 수 있다.
이에 따라 일 실시 예에 따른 디지털 영상 처리 장치는 사용자가 영상을 촬영한 직후, 바로 원근 변환의 영상 처리로 생성된 변환 영환을 확인할 수 있게 한다.
디지털 영상 처리 장치의 동작들을 순서대로 상술한다.
도2 는 일 실시 예에 따른 프리뷰 영상에서 사각 영역을 검출하고, 촬영 영상에서 원근 변환을 수행하는 디지털 영상 처리 방법의 흐름도이다.
단계 100에서 디지털 영상 처리 장치는 프리뷰 영상을 수신할 수 있다.
일 실시 예에 따른 프리뷰 영상은 추후에 촬영 될 영상에 원근 변환의 영상 처리가 이루어 질 수 있도록, 사각형의 모양을 가진 피사체를 포함하는 영상일 수 있다.
단계 110에서 디지털 영상 처리 장치는 단계100에서 수신한 프리뷰 영상에서 사각 영역을 검출하고, 사각 영역에 대응되는 좌표 정보를 획득할 수 있다.
예를 들면, 일 실시 예에 따른 사각 영역이란, 프리뷰 영상에 포함된 사각형의 모양을 가진 피사체에 대응되는 것이고, 일 실시 예에 따른 좌표 정보는 프리뷰 영상에서 검출된 사각 영역의 각 꼭지점에 대응되는 픽셀의 좌표 정보를 포함할 수 있다.
단계 120에서 디지털 영상 처리 장치는 단계110에서 검출된 적어도 하나 이상의 사각 영역 중에 메인 사각 영역을 결정할 수 있다.
예를 들면, 메인 사각 영역이란 프리뷰 영상에서 검출된 적어도 하나 이상의 사각 영역 중에서, 촬영 영상에서 원근 변환의 대상이 되는 사각 영역일 수 있다.
단계 130에서 디지털 영상 처리 장치는 영상을 촬영할 수 있다.
예를 들면, 단계 130에서 촬영 된 영상이란 영상 수신부(10)로부터 수신되는 프리뷰 영상일 수 있다.
또한, 단계 130에서 촬영 된 영상이란 단계120 에서 결정된 메인 사각 영역에 초점을 맞추어 촬영된 영상일 수 있고, 단계 110에서 검출된 복수의 사각 영역들 각각에 초점을 맞추어 촬영된 복수의 영상일 수 있다.
단계 140에서 디지털 영상 처리 장치는 단계130에서 촬영된 영상을 단계120 에서 결정된 메인 사각 영역에 대응되는 좌표 정보를 이용하여 원근 변환하여 변환 영상을 생성할 수 있다.
이에 따라, 일 실시 예에 따른 디지털 영상 처리 방법은 영상 촬영 전에, 프리뷰 영상에서 사각 영역을 검출함으로써 획득된 좌표 정보를 이용하여, 영상 촬영 후에 촬영된 영상에 원근 변환(Perspective Transform)을 신속하게 수행할 수 있는 방법을 제공한다.
또한, 생성된 변환 영상은 디스플레이부(70)에 표시될 수 있다. 이에 따라, 일 실시 예에 따른 디지털 영상 처리 방법은 사용자가 영상을 촬영한 직후 바로, 원근 변환의 영상 처리로 생성된 변환 영환을 확인할 수 있는 방법을 제공한다.
도3a 내지 도3b는 일 실시 예에 따른 디지털 영상 처리 장치가 프리뷰 영상에서 적어도 하나 이상의 사각 영역을 검출하여 디스플레이부(70)에 표시하는 일 예를 도시한 도면이다.
일 실시 예에 따른 디지털 영상 처리 장치는, 휴대폰, 디지털 카메라, 캠코더 등과 같은 카메라가 탑재된 휴대 단말에 포함될 수 있다.
예를 들면, 일 실시 예에 따른 사각 영역은 프리뷰 영상에 포함된 사각형의 모양을 가진 피사체에 대응되는 것으로, 도3a 에서 도시한 바와 같이 4개의 사각 영역이 검출될 수 있다.
또한, 일 실시 예에 따른 적어도 하나 이상의 사각 영역은 프리뷰 영상과 함께 표시될 수 있는데, 도3b에서 도시한 바와 같이 검출된 사각 영역의 꼭지점에 해당하는 좌표에 포인트가 표시될 수 있다.
도4 은 일 실시 예에 따른 프리뷰 영상에서 검출된 적어도 하나 이상의 사각 영역 중에서, 촬영 영상에서 원근 변환의 대상이 되는 메인 사각 영역을 결정하는 디지털 영상 처리 장치의 블록도이다.
일 실시 예에 따른 디지털 영상 처리 장치는 유효 사각 영역 판단부(30) 및 메인 사각 영역 판단부(30)를 더 포함할 수 있다.
일 실시 예에 따른 유효 사각 영역 판단부(30)는 사각 영역 검출부(20)에서 검출된 적어도 하나 이상의 사각 영역 중에 적어도 하나 이상의 유효 사각 영역을 결정할 수 있다.
예를 들면, 유효 사각 영역은 프리뷰 영상의 연속적인 복수의 영상 프레임마다 각각 획득된 좌표 정보를 필터링 하여 결정될 수 있다.
프리뷰 영상은 정지 영상과는 달리 카메라의 움직임, 초점, 빛 반사, 그림자 등의 외부 요건에 의해 사각 영역 검출부(20)에서 검출되는 사각 영역이 조금씩 달라질 수 있다. 따라서, 유효 사각 영역 판단부(30)에서는 사각 영역 검출부(20)에서 획득된 좌표 정보를 정제할 필요가 발생할 수 있다. 이 경우, 좌표 정보의 필터링의 방법은 업계에서 통용되는 칼만(Kalman)을 이용하는 방법, 평균(Average) 또는 중간 값(Median)에 의한 방법 등 다양한 방법들이 있으므로, 검출된 사각 영역에 대응되는 좌표 정보를 필터링하는 방법이 특정 방법으로 한정되지 않음을 유의하여야 한다.
이에 대해서는 도6에서 자세하게 설명하기로 한다.
또한, 사각 영역 검출부(20)에서 검출된 복수의 사각 영역의 각각의 중점간의 거리가 미리 결정된 임계 값 이하인 경우, 복수의 사각 영역 중에서 가장 큰 크기를 가지는 사각 영역이 유효 사각 영역으로 결정될 수 있다.
이에 대해서는 도 7a 내지 도7b 에서 자세하게 설명하기로 한다.
일 실시 예에 따른 메인 사각 영역 판단부(30)는 유효 사각 영역 판단부(30)에서 결정된 유효 사각 영역 중에 소정의 결정 기준에 따라 메인 사각 영역을 결정할 수 있다.
예를 들면, 메인 사각 영역은 유효 사각 영역 판단부(30)에서 결정된 유효 사각 영역 중에, 각각의 유효 사각 영역을 정의하는 파라미터의 값에 기초하여 결정될 수 있다. 이 경우, 사각 영역을 정의하는 파라미터의 값에는 사각 영역을 정의하는 크기, 사각 영역을 정의하는 왜곡 정도, 프리뷰 영상의 가운데를 기준으로 사각 영역이 떨어진 정도 등이 포함될 수 있다.
또한, 메인 사각 영역은 유효 사각 영역 판단부(30)에서 결정된 유효 사각 영역 중에, 사용자의 입력에 기초하여 결정될 수 있다. 이 경우, 메인 사각 영역은 사용자의 의도에 따라, 사용자 입력에 기초하여 변경될 수도 있다.
이에 대해서는 도8a 내지 도8b에서 자세하게 설명하기로 한다.
디지털 영상 처리 장치의 동작들을 순서대로 상술한다.
도5 는 일 실시 예에 따른 프리뷰 영상에서 검출된 적어도 하나 이상의 사각 영역에서, 사용자가 원근 변환을 하려는 메인 사각 영역을 결정하는 디지털 영상 처리 방법의 흐름도이다.
단계 200내지 단계 210 및 단계 240 내지 단계 250은 도2 의 단계 100내지 110 및 단계 130 내지 단계140과 대응하므로 구체적인 설명은 생략한다.
단계 220에서 디지털 영상 처리 장치는 단계210 에서 검출된 사각 영역 중에서 적어도 하나 이상의 유효 사각 영역을 결정할 수 있다.
예를 들면, 유효 사각 영역은 프리뷰 영상의 연속적인 복수의 영상 프레임마다 각각 획득된 좌표 정보를 필터링 하여 결정될 수 있다.
또한, 사각 영역 검출부(20)에서 검출된 복수의 사각 영역의 각각의 중점간의 거리가 미리 결정된 임계 값 이하인 경우, 복수의 사각 영역 중에서 가장 큰 크기를 가지는 사각 영역이 유효 사각 영역으로 결정될 수 있다.
단계 230에서 디지털 영상 처리 장치는 단계220에서 결정된 유효 사각 영역 중에서 소정의 결정 기준에 따라 상기 메인 사각 영역을 결정할 수 있다.
예를 들면, 메인 사각 영역은 유효 사각 영역 판단부(30)에서 결정된 유효 사각 영역 중에, 상기 각각의 유효 사각 영역을 정의하는 파라미터의 값에 기초하여 결정될 수 있다. 또한, 메인 사각 영역은 유효 사각 영역 판단부(30)에서 결정된 유효 사각 영역 중에, 사용자의 입력에 기초하여 결정될 수 있다.
도6 및 도7a 내지 도7b는 일 실시 예에 따른 디지털 영상 처리 장치가 프리뷰 영상에서 유효 사각 영역을 결정하는 다양한 예를 도시한 도면이다.
프리뷰 영상은 정지 영상과는 달리 카메라의 움직임, 초점, 빛 반사, 그림자 등의 외부 요건에 의해 검출되는 사각 영역이 조금씩 달라질 수 있다. 따라서, 도6에서 도시한 바와 같이 프리뷰 영상의 연속적인 복수의 영상 프레임마다 각각 획득된 좌표 정보를 필터링하면, 부적절한 사각 영역(점선의 모서리)은 제외되고, 적절한 사각 영역(실선의 모서리) 이 유효 사각 영역으로 결정될 수 있다.
도7a에서 도시한 바와 같이, 프리뷰 영상에서 검출된 복수의 사각 영역(B)이 서로 동일한 중점을 가질 수 있는 데, 이 경우 도7b에서 도시한 바와 같이 복수의 사각 영역 중에서 가장 큰 크기를 가지는 최외각 사각 영역이 유효 사각 영역으로 결정될 수 있다.
도8a 내지 도8b는 일 실시 예에 따른 디지털 영상 처리 장치가 프리뷰 영상에서 메인 사각 영역을 결정하여 디스플레이부(70)에 표시하는 다양한 예를 도시한 도면이다.
예를 들면, 메인 사각 영역은 프리뷰 영상에서 결정된 복수의 유효 사각 영역 중에서 소정의 결정 기준에 따라 결정될 수 있다.
예를 들면, 메인 사각 영역은 각각의 유효 사각 영역을 정의하는 파라미터의 값에 기초하여 결정될 수 있는데, 도8a 에서 도시한 바와 같이 크기가 가장 큰 유효 사각 영역 C 가 메인 사각 영역으로 결정될 수 있다.
이 경우, 메인 사각 영역은 사용자의 의도에 따라 변경될 수도 있는데 도8b에서 도시한 바와 같이 사용자가 유효 사각 영역 A 의 안을 터치하면, 터치된 위치의 좌표 값을 포함하는 유효 사각 영역A가 메인 사각 영역으로 결정될 수 있다.
또한, 유효 사각 영역과 메인 사각 영역는 프리뷰 영상과 함께 디스플레이부(70)에 표시될 수 있는데, 도8a 내지 도8b에서 도시한 바와 같이 유효 사각 영역은 점선으로 메인 사각 영역은 실선으로 서로 다르게 표시할 수 있다. 이에 따라 일 실시 예에 따른 디지털 영상 처리 장치는 사용자가 촬영 전에 원근 변환이 될 사각 영역을 프리뷰 영상에서 직접 확인할 수 있고, 사각 영역에 대한 편집도 가능하게 할 수 있다.
도9 은 일 실시 예에 따른 프리뷰 영상에서 검출된 사각 영역에 대응되는 썸 네일 영상을 생성하는 디지털 영상 처리 장치의 블록도이다.
일 실시 예에 따른 디지털 영상 처리 장치는 썸 네일 영상 생성부(90)를 더 포함할 수 있다.
일 실시 예에 따른 썸 네일 영상 생성부(90)는 사각 영역 판단부(30)에서 검출된 사각 영역에 대응되는 복수의 썸 네일 영상을 생성할 수 있다.
예를 들면, 썸 네일 영상은 유효 사각 영역 판단부(30)에서 검출된 유효 사각 영역을 기초로 하여 생성될 수 있다.
이 경우, 썸 네일 영상은 프리뷰 영상과 함께 디스플레이부(70)에 표시될 수 있다. 이에 따라, 일 실시 예에 따른 디지털 영상 처리 장치는 사용자가 촬영 전에 원근 변환이 될 사각 영역을 프리뷰 영상에서 직접 확인할 수 있게 한다.
도10 는 일 실시 예에 따른 디지털 영상 처리 장치가 복수의 썸 네일 영상을 프리뷰 영상과 함께 디스플레이부(70)에 표시하는 일 예를 도시한 도면이다.
도10 에서 도시한 바와 같이, 프리뷰 영상에서 결정된 유효 사각 영역을 나타내는 점선 사각 영역과, 메인 사각 영역을 나타내는 실선 사각 영역을 기초로 생성된 복수의 썸 네일 영상이 프리뷰 영상과 함께 표시될 수 있다.
이 경우, 도10 에서 도시한 바와 같이 메인 사각 영역을 기초로 생성된 썸 네일 영상은 유효 사각 영역을 기초로 생성된 썸 네일 영상과 다르게 표시될 수 있다.
이에 따라 일 실시 예에 디지털 영상 처리 장치는 프리뷰 영상에서 유효 사각 영역 및 메인 사각 영역을 표시하고, 이에 대응되는 복수의 썸 네일 영상을 함께 표시함으로써, 사용자로 하여금 촬영 후에 원근 변환된 영상을 미리 확인할 수 있게 한다.
도11 a 내지 도11b는 일 실시 예에 따른 디지털 영상 처리 장치가 프리뷰 영상에서 결정된 메인 사각 영역의 좌표 정보를 이용하여, 촬영 영상을 원근 변환하여 생성한 변환 영상을 디스플레이부(70)에 표시하는 일 예를 도시한 도면이다.
도11a 에서 도시한 바와 같이 프리뷰 영상에 표시된 메인 사각 영역(실선의 사각 영역)의 좌표 정보(사각 영역의 꼭지점의 좌표 값)와 촬영된 영상을 기초로, 생성된 변환 영상이 도11b에서 도시한 바와 같이 디스플레이부(70)에 표시될 수 있다. 이에 따라 일 실시 예에 따른 디지털 영상 처리 장치는 사용자가 영상을 촬영한 직후, 바로 원근 변환의 영상 처리로 생성된 변환 영환을 확인할 수 있게 한다.
디지털 영상 처리 장치의 동작들을 순서대로 상술한다.
도12 내지 도13 은 일 실시 예에 따른 프리뷰 영상에서 검출된 사각 영역에 초점을 맞추어 영상을 촬영하는 디지털 영상 처리 방법의 흐름도이다.
도12의 단계 300내지 단계 320 및 단계340 은 도2 의 단계 100내지 1120및 단계 140 과 대응하므로 구체적인 설명은 생략한다.
단계 330에서 디지털 영상 처리 장치는 단계 320에서 결정된 메인 사각 영역에 대응되는 좌표 정보를 이용하여, 메인 사각 영역에 초점을 맞추어 영상을 촬영할 수 있다.
예를 들면, 메인 사각 영역에 대응되는 좌표 정보는 영상을 촬영할 때 AF 영역 정보로써 이용될 수 있다. 이에 따라 일 실시 예에 따른 디지털 영상 처리 방법은 사용자가 원근 변환을 수행하고자 하는 메인 사각 영역에 초점을 맞추어 촬영한 영상을 기초로, 원근 변환을 수행함으로써 영상 품질이 높은 변환 영상을 제공할 수 있다.
도13의 단계 400내지 단계 420 은 도2 의 단계 100내지 120 과 대응하므로 구체적인 설명은 생략한다.
일 실시 예에 따른 디지털 영상 처리 방법에서, 사용자가 원근 변환을 하려는 메인 사각 영역은, 변환 영상이 생성된 이후에도 사용자의 의도에 따라 변경될 수 있다.
이 경우, 종전에 메인 사각 영역에 초점을 맞추어 촬영한 영상에 대하여, 다시 변경된 메인 사각 영역을 기초로 원근 변환을 수행하려는 경우, 초점이 맞지 않는 영상으로 영상 처리를 수행하는 것이므로 영상 품질은 떨어질 수 밖에 없다.
단계 430에서 디지털 영상 처리 장치는 단계 410 에서 검출된 복수의 사각 영역에 각각 초점을 맞추어 복수의 영상을 촬영할 수 있다.
예를 들면, 프리뷰 영상에서 검출되는 복수의 사각 영역이 깊이 정보(Depth)가 상이한 경우는, 각각의 사각 영역에 초점을 맞춘 복수의 영상이 촬영될 수 있다.
이 경우, 복수의 사각 영역들의 깊이 정보가 상이하다는 것은, 사각 영역에서 검출된 에지의 크기에 기초하여 판단될 수 있다.
단계 440에서 디지털 영상 처리 장치는 단계 430에서 촬영된 복수의 영상 중에서 메인 사각 영역에 초점을 맞추어 촬영된 영상을 선택할 수 있다.
예를 들면, 메인 사각 영역은 단계 420에서 결정된 것이 아닐 수 있다.
단계 450에서 디지털 영상 처리 장치는 메인 사각 영역에 대응되는 좌표 정보를 이용하여, 단계 440에서 선택된 영상을 원근 변환하여 변환 영상을 생성할 수 있다.
일 실시 예에 따른 디지털 영상 처리 방법은 깊이 정보가 상이한 복수의 사각 영역들이 프리뷰 영상에서 검출되는 경우, 각각의 사각 영역에 초점을 맞추어 복수의 영상을 촬영할 수 있다. 이에 따라 추후에 메인 사각 영역이 사용자의 의도에 따라 변경이 되더라도, 변경된 메인 사각 영역에 초점이 맞춰진 촬영 영상이 선택되어 원근 변환이 수행될 수 있다.
따라서, 일 실시 예에 따른 디지털 영상 처리 방법은 사용자의 의도에 따라 메인 사각 영역이 바뀌더라도, 바뀐 메인 사각 영역에 초점이 맞는 촬영 영상을 기초로 원근 변환을 수행하게 함으로써, 영상 품질이 좋은 변환 영상을 생성할 수 있도록 한다.
도14a 내지 도 14c는 일 실시 예에 따른 디지털 영상 처리 장치가 프리뷰 영상에서 검출된 사각 영역에 초점을 맞추어 촬영한 영상을 원근 변환하여 생성한 변환 영상을 디스플레이부(70)에 표시하는 일 예를 도시한 도면이다.
도14a 에서 도시한 바와 같이, 디지털 영상 처리 장치는 프리뷰 영상에서 깊이 정보(Depth)가 상이한 두 개의 사각 영역이 검출되는 경우, 사각 영역 A 와 사각 영역 B에 각각 초점이 맞는 두 개의 영상을 촬영한다.
이 경우, 사용자의 입력에 기초하여 사각 영역A가 메인 사각 영역으로 결정된 경우, 디지털 영상 처리 장치는 사각 영역A에 초점이 맞춰서 촬영된 영상과, 사각 영역A 의 좌표 정보를 이용하여 도14b에서 도시한 바와 같은 변환 영상을 생성할 수 있다.
반면, 사용자의 입력에 기초하여 메인 사각 영역이 사각 영역B로 변경된 경우, 디지털 영상 처리 장치는 사각 영역B에 초점이 맞춰서 촬영된 영상과, 사각 영역B 의 좌표 정보를 이용하여 도14c에서 도시한 바와 같은 변환 영상을 생성할 수 있다.
따라서, 일 실시 예에 따른 디지털 영상 처리 장치는 사용자의 의도에 따라 메인 사각 영역이 바뀌더라도, 바뀐 메인 사각 영역에 초점이 맞는 촬영 영상을 기초로 원근 변환을 수행하게 함으로써, 영상 품질이 좋은 변환 영상을 생성할 수 있다.
다양한 실시 예에 따른 장치는 프로세서, 프로그램 데이터를 저장하고 실행하는 메모리, 디스크 드라이브와 같은 영구 메모리(permanent storage), 터치 패널, 키(key), 버튼 등과 같은 사용자 인터페이스 장치 등을 포함할 수 있다.
소프트웨어 모듈 또는 알고리즘으로 구현되는 방법들은 상기 프로세서상에서 실행 가능한 컴퓨터가 읽을 수 있는 코드들 또는 프로그램 명령들로서 컴퓨터가 읽을 수 있는 저장 매체 상에 저장될 수 있다. 여기서 컴퓨터가 읽을 수 있는 기록 매체로 마그네틱 저장 매체(예컨대, ROM(read-only memory), RAM(random-access memory), 플로피 디스크, 하드 디스크 등) 및 광학적 판독 매체(예컨대, 시디롬(CD-ROM), 디브이디(DVD: Digital Versatile Disc)) 등이 있다. 컴퓨터가 읽을 수 있는 저장 매체는 네트워크로 연결된 컴퓨터 시스템들에 분산되어, 분산 방식으로 컴퓨터가 판독 가능한 코드가 저장되고 실행될 수 있다. 매체는 컴퓨터에 의해 판독가능하며, 프로세서에서 실행될 수 있다.
본 발명에서 인용하는 공개 문헌, 특허 출원, 특허 등을 포함하는 모든 문헌들은 각 인용 문헌이 개별적으로 및 구체적으로 병합하여 나타내는 것 또는 에서 전체적으로 병합하여 나타낸 것과 동일하게 에 병합될 수 있다.
본 발명의 이해를 위하여, 도면에 도시된 바람직한 실시 예들에서 참조 부호를 기재하였으며, 본 발명의 실시 예들을 설명하기 위하여 특정 용어들을 사용하였으나, 특정 용어에 의해 이 한정되는 것은 아니며, 본 발명은 당업자에 있어서 통상적으로 생각할 수 있는 모든 구성 요소들을 포함할 수 있다.
본 발명은 기능적인 블록 구성들 및 다양한 처리 단계들로 나타내어질 수 있다. 이러한 기능 블록들은 특정 기능들을 실행하는 다양한 개수의 하드웨어 또는/및 소프트웨어 구성들로 구현될 수 있다. 예를 들어, 본 발명은 하나 이상의 마이크로프로세서들의 제어 또는 다른 제어 장치들에 의해서 다양한 기능들을 실행할 수 있는, 메모리, 프로세싱, 로직(logic), 룩 업 테이블(look-up table) 등과 같은 직접 회로 구성들을 채용할 수 있다. 에의 구성 요소들이 소프트웨어 프로그래밍 또는 소프트웨어 요소들로 실행될 수 있는 것과 유사하게, 은 데이터 구조, 프로세스들, 루틴들 또는 다른 프로그래밍 구성들의 조합으로 구현되는 다양한 알고리즘을 포함하여, C, C++, 자바(Java), 어셈블러(assembler) 등과 같은 프로그래밍 또는 스크립팅 언어로 구현될 수 있다. 기능적인 측면들은 하나 이상의 프로세서들에서 실행되는 알고리즘으로 구현될 수 있다. 또한, 본 발명은 전자적인 환경 설정, 신호 처리, 및/또는 데이터 처리 등을 위하여 종래 기술을 채용할 수 있다. “매커니즘”, “요소”, “수단”, “구성”과 같은 용어는 넓게 사용될 수 있으며, 기계적이고 물리적인 구성들로서 한정되는 것은 아니다. 상기 용어는 프로세서 등과 연계하여 소프트웨어의 일련의 처리들(routines)의 의미를 포함할 수 있다.
본 발명에서 설명하는 특정 실행들은 일 실시 예들로서, 어떠한 방법으로도 의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, “필수적인”, “중요하게” 등과 같이 구체적인 언급이 없다면 의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.
본 발명의 명세서(특히 특허청구범위에서)에서 “상기”의 용어 및 이와 유사한 지시 용어의 사용은 단수 및 복수 모두에 해당하는 것일 수 있다. 또한, 본 발명에서 범위(range)를 기재한 경우 상기 범위에 속하는 개별적인 값을 적용한 발명을 포함하는 것으로서(이에 반하는 기재가 없다면), 발명의 상세한 설명에 상기 범위를 구성하는 각 개별적인 값을 기재한 것과 같다. 마지막으로, 본 발명에 따른 방법을 구성하는 단계들에 대하여 명백하게 순서를 기재하거나 반하는 기재가 없다면, 상기 단계들은 적당한 순서로 행해질 수 있다. 반드시 상기 단계들의 기재 순서에 따라 이 한정되는 것은 아니다. 본 발명에서 모든 예들 또는 예시적인 용어(예들 들어, 등등)의 사용은 단순히 을 상세히 설명하기 위한 것으로서 특허청구범위에 의해 한정되지 않는 이상 상기 예들 또는 예시적인 용어로 인해 의 범위가 한정되는 것은 아니다. 또한, 당업자는 다양한 수정, 조합 및 변경이 부가된 특허청구범위 또는 그 균등물의 범주 내에서 설계 조건 및 팩터에 따라 구성될 수 있음을 알 수 있다.
100a, 100b, 100c: 디지털 영상 처리 장치.
10: 영상 수신부 20: 사각 영역 검출부
30: 사각 영역 판단부 40: 영상 촬영부
50: 변환 영상 생성부 60: 사용자 입력부
70: 디스플레이부 80: 제어부
90: 썸 네일 영상 생성부

Claims (21)

  1. 프리뷰 영상을 수신하는 단계;
    상기 프리뷰 영상에서 사각 영역을 검출하고, 상기 사각 영역에 대응되는 좌표 정보를 획득하는 단계;
    상기 프리뷰 영상에서 검출된 적어도 하나 이상의 사각 영역 중에 메인 사각 영역을 결정하는 단계;
    상기 메인 사각 영역을 결정한 이후, 상기 프리뷰 영상에 대응되는 영상을 촬영하는 단계; 및
    상기 메인 사각 영역에 대응되는 상기 좌표 정보를 이용하여, 상기 영상을 원근 변환하여 변환 영상을 생성하는 단계; 를 포함하는, 디지털 영상 처리 방법.
  2. 제1 항에 있어서, 상기 메인 사각 영역을 결정하는 단계; 는
    상기 프리뷰 영상에서 검출된 사각 영역 중에 적어도 하나 이상의 유효 사각 영역을 결정하는 단계; 및
    상기 유효 사각 영역 중에 소정의 결정 기준에 따라 상기 메인 사각 영역을 결정하는 단계; 를 더 포함하는 것인, 디지털 영상 처리 방법.
  3. 제2 항에 있어서, 상기 유효 사각 영역을 결정하는 단계;는
    상기 프리뷰 영상의 연속적인 복수의 영상 프레임마다 각각 획득된 상기 좌표 정보를 필터링하여 상기 유효 사각 영역을 결정하는 것을 특징으로 하는, 디지털 영상 처리 방법.
  4. 제2 항에 있어서, 상기 유효 사각 영역을 결정하는 단계;는
    상기 프리뷰 영상에서 검출된 복수의 사각 영역의 각각의 중점간의 거리가 미리 결정된 임계 값 이하인 경우, 상기 복수의 사각 영역 중에서 가장 큰 크기를 가지는 사각 영역을 상기 유효 사각 영역으로 결정하는 것을 특징으로 하는, 디지털 영상 처리 방법.
  5. 제2 항에 있어서, 상기 메인 사각 영역을 결정하는 단계;는
    상기 각각의 유효 사각 영역을 정의하는 파라미터의 값에 기초하여 상기 유효 사각 영역 중에 상기 메인 사각 영역을 결정하는 것을 특징으로 하는, 디지털 영상 처리 방법.
  6. 제2 항에 있어서, 상기 메인 사각 영역을 결정하는 단계;는
    상기 유효 사각 영역 중에 사용자의 입력에 기초하여 상기 메인 사각 영역을 결정하는 것을 특징으로 하는, 디지털 영상 처리 방법.
  7. 제2 항에 있어서,
    상기 유효 사각 영역과 상기 메인 사각 영역는 상기 프리뷰 영상과 함께 디스플레이부에 표시되는 것을 특징으로 하는, 디지털 영상 처리 방법.
  8. 제1항에 있어서,
    상기 디지털 영상 처리 방법은,
    상기 프리뷰 영상에서 검출된 사각 영역에 대응되는 복수의 썸 네일 영상을 생성하는 단계; 및
    상기 생성된 복수의 썸 네일 영상을 상기 프리뷰 영상과 함께 표시하는 단계; 를 포함하는, 디지털 영상 처리 방법.
  9. 제1 항에 있어서, 상기 영상을 촬영 하는 단계; 는
    상기 메인 사각 영역에 대응되는 상기 좌표 정보를 이용하여, 상기 메인 사각 영역에 초점을 맞추어 영상을 촬영하는 것을 특징으로 하는, 디지털 영상 처리 방법.
  10. 제1항에 있어서, 상기 영상을 촬영하는 단계는;
    상기 프리뷰 영상에서 검출된 복수의 사각 영역에 각각 초점을 맞추어 복수의 영상을 촬영하는 단계; 를 포함하고,
    상기 영상을 원근 변환하여 변환 영상을 생성하는 단계;는
    상기 복수의 영상 중에 상기 메인 사각 영역에 초점을 맞추어 촬영된 영상을 선택하는 단계; 및
    상기 메인 사각 영역에 대응되는 상기 좌표 정보를 이용하여, 상기 선택된 영상을 원근 변환하여 변환 영상을 생성하는 단계; 를 포함하는 것인, 디지털 영상 처리 방법.
  11. 프리뷰 영상을 수신하는 영상 수신부;
    상기 영상 수신부에서 수신된 상기 프리뷰 영상에서 사각 영역을 검출하고, 상기 사각 영역에 대응되는 좌표 정보를 획득하는 사각 영역 검출부;
    상기 사각 영역 검출부에서 검출된 적어도 하나 이상의 사각 영역 중에 메인 사각 영역을 결정하는 사각 영역 판단부;
    상기 메인 사각 영역을 결정한 이후, 상기 프리뷰 영상에 대응되는 영상을 촬영하는 영상 촬영부;
    상기 영상 촬영부에서 촬영된 상기 영상을 원근 변환하여 변환 영상을 생성하는 변환 영상 생성부; 및
    상기 사각 영역 판단부에서 결정된 상기 메인 사각 영역에 대응되는 상기 좌표 정보를 이용하여, 상기 변환 영상 생성부가 변환 영상을 생성하도록 제어하는 제어부; 를 포함하는 것인, 디지털 영상 처리 장치.
  12. 제11 항에 있어서,
    상기 사각 영역 판단부는
    상기 사각 영역 검출부에서 검출된 적어도 하나 이상의 사각 영역 중에 적어도 하나 이상의 유효 사각 영역을 결정하는 유효 사각 영역 판단부; 및
    상기 유효 사각 영역 판단부에서 결정된 유효 사각 영역 중에 소정의 결정 기준에 따라 상기 메인 사각 영역을 결정하는 메인 사각 영역 판단부;를 더 포함하는 것인, 디지털 영상 처리 장치.
  13. 제12 항에 있어서,
    상기 유효 사각 영역 판단부는
    상기 사각 영역 검출부에서 상기 프리뷰 영상의 연속적인 복수의 영상 프레임마다 각각 획득된 상기 좌표 정보를, 필터링 하여 상기 유효 사각 영역을 결정하는 것을 특징으로 하는, 디지털 영상 처리 장치.
  14. 제12 항에 있어서, 상기 유효 사각 영역 판단부는
    상기 사각 영역 검출부에서 검출된 복수의 사각 영역의 각각의 중점간의 거리가 미리 결정된 임계 값 이하인 경우, 상기 복수의 사각 영역 중에서 가장 큰 크기를 가지는 사각 영역을 상기 유효 사각 영역으로 결정하는 것을 특징으로 하는, 디지털 영상 처리 장치.
  15. 제12 항에 있어서,
    상기 메인 사각 영역 판단부는,
    상기 유효 사각 영역 판단부에서 결정된 유효 사각 영역 중에, 상기 각각의 유효 사각 영역을 정의하는 파라미터의 값에 기초하여 상기 메인 사각 영역을 결정하는 것을 특징으로 하는, 디지털 영상 처리 장치.
  16. 제12 항에 있어서,
    상기 메인 사각 영역 판단부는,
    상기 유효 사각 영역 판단부에서 결정된 유효 사각 영역 중에, 사용자의 입력에 기초하여 상기 메인 사각 영역을 결정하는 것을 특징으로 하는, 디지털 영상 처리 장치.
  17. 제12 항에 있어서,
    상기 제어부는 상기 유효 사각 영역과 상기 메인 사각 영역을 상기 프리뷰 영상과 함께 디스플레이부에 표시되도록 제어하는 것을 특징으로 하는, 디지털 영상 처리 장치.
  18. 제11항에 있어서,
    상기 디지털 영상 처리 장치는
    상기 사각 영역 판단부에서 검출된 사각 영역에 대응되는 복수의 썸 네일 영상을 생성하는 썸 네일 영상 생성부; 를 포함하고,
    상기 제어부는
    상기 썸 네일 영상 생성부에서 생성된 상기 복수의 썸 네일 영상을 상기 프리뷰 영상과 함께 디스플레이부에 표시하도록 제어하는 것을 특징으로 하는, 디지털 영상 처리 장치.
  19. 제11 항에 있어서, 상기 영상 촬영부는
    상기 메인 사각 영역 판단부에서 결정된 상기 메인 사각 영역에 대응되는 상기 좌표 정보를 이용하여, 상기 메인 사각 영역에 초점을 맞추어 영상을 촬영하는 것을 특징으로 하는, 디지털 영상 처리 장치.
  20. 제11항에 있어서, 상기 영상 촬영부는
    상기 사각 영역 검출부에서 검출된 복수의 상기 사각 영역에 각각 초점을 맞추어 복수의 영상을 촬영하며,
    상기 제어부는,
    상기 사각 영역 판단부에서 결정된 상기 메인 사각 영역에 대응되는 상기 좌표 정보와, 상기 메인 사각 영역에 초점을 맞추어 촬영된 영상을 이용하여, 상기 변환 영상 생성부가 변환 영상을 생성하도록 제어하는 것을 특징으로 하는, 디지털 영상 처리 장치.
  21. 프로세서에 의해 도출되어 실행되었을 때, 디지털 영상 처리 방법을 수행하는 컴퓨터 프로그램 코드들을 저장하는 컴퓨터 판독가능 저장매체에 있어서, 상기 디지털 영상 처리 방법은,
    프리뷰 영상을 수신하는 단계;
    상기 프리뷰 영상에서 사각 영역을 검출하고, 상기 사각 영역에 대응되는 좌표 정보를 획득하는 단계;
    상기 프리뷰 영상에서 검출된 적어도 하나 이상의 사각 영역 중에 메인 사각 영역을 결정하는 단계;
    상기 메인 사각 영역을 결정한 이후, 상기 프리뷰 영상에 대응되는 영상을 촬영하는 단계; 및
    상기 메인 사각 영역에 대응되는 상기 좌표 정보를 이용하여, 상기 영상을 원근 변환하여 변환 영상을 생성하는 단계; 를 포함하는 컴퓨터 판독가능 저장매체.
KR1020140119363A 2014-09-05 2014-09-05 디지털 영상 처리 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 디지털 영상 처리 장치 KR102173109B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020140119363A KR102173109B1 (ko) 2014-09-05 2014-09-05 디지털 영상 처리 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 디지털 영상 처리 장치
US14/842,116 US9984435B2 (en) 2014-09-05 2015-09-01 Digital image processing method, non-transitory computer-readable recording medium having recorded thereon a program for executing the digital image processing method, and digital image processing apparatus
CN202011474412.0A CN112672041A (zh) 2014-09-05 2015-09-07 图像处理方法和图像处理装置
CN201510563754.2A CN105407306B (zh) 2014-09-05 2015-09-07 图像处理方法和图像处理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140119363A KR102173109B1 (ko) 2014-09-05 2014-09-05 디지털 영상 처리 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 디지털 영상 처리 장치

Publications (2)

Publication Number Publication Date
KR20160029589A KR20160029589A (ko) 2016-03-15
KR102173109B1 true KR102173109B1 (ko) 2020-11-02

Family

ID=55437792

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140119363A KR102173109B1 (ko) 2014-09-05 2014-09-05 디지털 영상 처리 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 디지털 영상 처리 장치

Country Status (3)

Country Link
US (1) US9984435B2 (ko)
KR (1) KR102173109B1 (ko)
CN (2) CN112672041A (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105954960A (zh) * 2016-04-29 2016-09-21 广东美的制冷设备有限公司 球面投射显示方法、球面投射显示系统和家用电器
WO2018107566A1 (zh) * 2016-12-16 2018-06-21 华为技术有限公司 一种处理方法及移动设备
CN107194871B (zh) * 2017-05-25 2020-04-14 维沃移动通信有限公司 一种图像处理方法及移动终端
JP6930418B2 (ja) * 2017-12-26 2021-09-01 株式会社Ｊｖｃケンウッド 画像切り出し装置及び方法
US10902277B2 (en) * 2018-09-10 2021-01-26 Microsoft Technology Licensing, Llc Multi-region detection for images
CN112912332B (zh) * 2018-10-16 2023-08-01 株式会社多田野 起重机装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110069180A1 (en) * 2009-09-23 2011-03-24 Microsoft Corporation Camera-based scanning

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5528194A (en) 1991-05-13 1996-06-18 Sony Corporation Apparatus and method for performing geometric transformations on an input image
JP4169462B2 (ja) 1999-08-26 2008-10-22 株式会社リコー 画像処理方法及び装置、デジタルカメラ、画像処理システム、並びに、画像処理プログラムを記録した記録媒体
JP2005115711A (ja) 2003-10-09 2005-04-28 Casio Comput Co Ltd 画像補正装置、画像補正方法及びプログラム
JP4363151B2 (ja) 2003-10-14 2009-11-11 カシオ計算機株式会社 撮影装置、その画像処理方法及びプログラム
JP3743828B2 (ja) 2003-10-14 2006-02-08 カシオ計算機株式会社 電子カメラ
JP2005267457A (ja) 2004-03-19 2005-09-29 Casio Comput Co Ltd 画像処理装置、撮影装置、画像処理方法及びプログラム
US7366359B1 (en) * 2004-07-08 2008-04-29 Grandeye, Ltd. Image processing of regions in a wide angle video camera
JP4529837B2 (ja) 2005-08-04 2010-08-25 カシオ計算機株式会社 撮像装置、画像補正方法及びプログラム
JP4344888B2 (ja) 2005-12-09 2009-10-14 株式会社カシオ日立モバイルコミュニケーションズ 撮像装置、撮像画像処理方法及びプログラム
JP4662874B2 (ja) 2006-03-27 2011-03-30 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 画像処理装置、及びプログラム
KR20090031202A (ko) * 2007-09-21 2009-03-25 이수종 채널 화면 분할 방법 및 그 방법에 대한 컴퓨터 프로그램을저장한 기록매체
US8237807B2 (en) * 2008-07-24 2012-08-07 Apple Inc. Image capturing device with touch screen for adjusting camera settings
JP4856263B2 (ja) 2009-08-07 2012-01-18 シャープ株式会社 撮像画像処理システム、画像出力方法、プログラムおよび記録媒体
CN102025910B (zh) * 2009-09-22 2012-09-19 华晶科技股份有限公司 数字相机的连续对焦方法
KR101643869B1 (ko) * 2010-05-06 2016-07-29 엘지전자 주식회사 휴대 단말기 및 그 동작 방법
US20110293184A1 (en) * 2010-05-31 2011-12-01 Silverbrook Research Pty Ltd Method of identifying page from plurality of page fragment images
JP4763847B1 (ja) * 2010-08-30 2011-08-31 楽天株式会社 画像変換装置、画像処理装置、ならびに、画像処理システム
CN102074001B (zh) * 2010-11-25 2012-12-05 上海合合信息科技发展有限公司 一种文本图像的拼接方法及系统
CN102012629B (zh) * 2010-11-25 2012-07-04 上海合合信息科技发展有限公司 用于文本图像拼接的拍摄方法
JP5708051B2 (ja) * 2011-03-07 2015-04-30 株式会社リコー 映像処理装置、映像処理システム、テレビ会議システム、遠方監視システム、映像処理方法、及び撮像装置
US9390342B2 (en) 2011-10-17 2016-07-12 Sharp Laboratories Of America, Inc. Methods, systems and apparatus for correcting perspective distortion in a document image
US8866943B2 (en) * 2012-03-09 2014-10-21 Apple Inc. Video camera providing a composite video sequence
US9179061B1 (en) * 2013-12-11 2015-11-03 A9.Com, Inc. Assisted text input for computing devices

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110069180A1 (en) * 2009-09-23 2011-03-24 Microsoft Corporation Camera-based scanning

Also Published As

Publication number Publication date
US9984435B2 (en) 2018-05-29
CN112672041A (zh) 2021-04-16
US20160070978A1 (en) 2016-03-10
KR20160029589A (ko) 2016-03-15
CN105407306B (zh) 2020-11-13
CN105407306A (zh) 2016-03-16

Similar Documents

Publication Publication Date Title
KR102173109B1 (ko) 디지털 영상 처리 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 디지털 영상 처리 장치
US9906772B2 (en) Method for performing multi-camera capturing control of an electronic device, and associated apparatus
JP6271990B2 (ja) 画像処理装置、画像処理方法
US9832362B2 (en) Image-capturing apparatus
KR20150061277A (ko) 영상 촬영 장치 및 이의 영상 촬영 방법
US20180182075A1 (en) Image processing apparatus, image capturing apparatus, method of image processing, and storage medium
US20150035855A1 (en) Electronic apparatus, method of controlling the same, and image reproducing apparatus and method
US20210092304A1 (en) Image pickup apparatus, an image processing method and a non-transitory computer-readable medium
JP6786311B2 (ja) 画像処理装置、画像処理方法、コンピュータプログラムおよび記憶媒体
KR102272310B1 (ko) 영상 처리 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 전자 기기.
US9300860B2 (en) Image-capturing apparatus
US8334919B2 (en) Apparatus and method for digital photographing to correct subject area distortion caused by a lens
US10116865B2 (en) Image processing apparatus and image processing method for calculating motion vector between images with different in-focus positions
JP2017060010A (ja) 撮像装置、撮像装置の制御方法、およびプログラム
KR102314943B1 (ko) 정보 처리장치, 정보 처리방법 및 기억매체
JP6326631B2 (ja) 撮像装置
JP6645711B2 (ja) 画像処理装置、画像処理方法、プログラム
JP5866570B2 (ja) 撮像装置
JP6679430B2 (ja) 撮像装置、撮像装置の制御方法及びプログラム
JP2020086216A (ja) 撮像制御装置、撮像装置及び撮像制御プログラム
US11381728B2 (en) Image capture apparatus and method for controlling the same
JP6953594B2 (ja) 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体
JP2015079519A (ja) 画像処理装置、画像処理方法、及び画像処理プログラム
JP6089549B2 (ja) 情報処理装置、情報処理システム、およびプログラム
JP2018046372A (ja) 撮像装置、システム、プログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant