KR100657522B1 - 휴대용 단말기를 이용한 아웃 포커싱 촬영 장치 및 방법 - Google Patents

휴대용 단말기를 이용한 아웃 포커싱 촬영 장치 및 방법 Download PDF

Info

Publication number
KR100657522B1
KR100657522B1 KR1020060029413A KR20060029413A KR100657522B1 KR 100657522 B1 KR100657522 B1 KR 100657522B1 KR 1020060029413 A KR1020060029413 A KR 1020060029413A KR 20060029413 A KR20060029413 A KR 20060029413A KR 100657522 B1 KR100657522 B1 KR 100657522B1
Authority
KR
South Korea
Prior art keywords
block
image
subject
background
predetermined
Prior art date
Application number
KR1020060029413A
Other languages
English (en)
Inventor
최광철
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020060029413A priority Critical patent/KR100657522B1/ko
Application granted granted Critical
Publication of KR100657522B1 publication Critical patent/KR100657522B1/ko
Priority to CNA200710001600XA priority patent/CN101047769A/zh
Priority to US11/729,011 priority patent/US20070229697A1/en
Priority to EP07105480A priority patent/EP1841215A3/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03G—ELECTROGRAPHY; ELECTROPHOTOGRAPHY; MAGNETOGRAPHY
    • G03G21/00—Arrangements not provided for by groups G03G13/00 - G03G19/00, e.g. cleaning, elimination of residual charge
    • G03G21/16—Mechanical means for facilitating the maintenance of the apparatus, e.g. modular arrangements
    • G03G21/1661—Mechanical means for facilitating the maintenance of the apparatus, e.g. modular arrangements means for handling parts of the apparatus in the apparatus
    • G03G21/169—Mechanical means for facilitating the maintenance of the apparatus, e.g. modular arrangements means for handling parts of the apparatus in the apparatus for the cleaning unit
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B01—PHYSICAL OR CHEMICAL PROCESSES OR APPARATUS IN GENERAL
    • B01D—SEPARATION
    • B01D46/00—Filters or filtering processes specially modified for separating dispersed particles from gases or vapours
    • B01D46/0002—Casings; Housings; Frame constructions
    • B01D46/0005—Mounting of filtering elements within casings, housings or frames
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B08—CLEANING
    • B08B—CLEANING IN GENERAL; PREVENTION OF FOULING IN GENERAL
    • B08B15/00—Preventing escape of dirt or fumes from the area where they are produced; Collecting or removing dirt or fumes from that area
    • B08B15/04—Preventing escape of dirt or fumes from the area where they are produced; Collecting or removing dirt or fumes from that area from a small area, e.g. a tool
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65D—CONTAINERS FOR STORAGE OR TRANSPORT OF ARTICLES OR MATERIALS, e.g. BAGS, BARRELS, BOTTLES, BOXES, CANS, CARTONS, CRATES, DRUMS, JARS, TANKS, HOPPERS, FORWARDING CONTAINERS; ACCESSORIES, CLOSURES, OR FITTINGS THEREFOR; PACKAGING ELEMENTS; PACKAGES
    • B65D25/00—Details of other kinds or types of rigid or semi-rigid containers
    • B65D25/02—Internal fittings
    • B65D25/04—Partitions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B01—PHYSICAL OR CHEMICAL PROCESSES OR APPARATUS IN GENERAL
    • B01D—SEPARATION
    • B01D2259/00—Type of treatment
    • B01D2259/45—Gas separation or purification devices adapted for specific applications
    • B01D2259/4541—Gas separation or purification devices adapted for specific applications for portable use, e.g. gas masks

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Chemical Kinetics & Catalysis (AREA)
  • Studio Devices (AREA)
  • Telephone Function (AREA)

Abstract

본 발명은 휴대용 단말기를 이용한 촬영 장치에 있어서, 피사체를 촬영하여 제 1 이미지를 획득하는 제 1 카메라와, 상기 제 1 카메라와 동시에 상기 피사체를 촬영하여 제 2 이미지를 획득하는 제 2 카메라와, 상기 제 1 이미지의 블록을 상기 제 2 이미지에서 검색하고 상기 제 2 이미지에서 검색된 블록이 배경에 포함된 블록인지 피사체에 포함된 블록인지 확인하고 상기 배경에 포함된 블록으로 확인되면 상기 블록을 블러링(Blurring)하는 효과 처리기를 포함하여 휴대용 단말기에 두 개의 카메라를 장착함으로써 촬영하고자 하는 이미지의 배경과 피사체를 구분하여 상기 피사체에 초점을 맞춘 것과 같은 효과를 가지는 아웃 포커싱 촬영이 가능하도록 한다.
아웃 포커싱, 피사계 심도 조절, 블러링 효과, 듀얼 카메라

Description

휴대용 단말기를 이용한 아웃 포커싱 촬영 장치 및 방법{APPARATUS AND METHOD FOR OUT-FOCUSING PHOTOGRAPHING OF PORTABLE TERMINAL}
도 1은 본 발명에 따른 휴대용 단말기의 구성을 도시한 블록도,
도 2는 본 발명에 따른 휴대용 단말기의 카메라를 이용하여 획득되는 이미지의 화면을 도시한 도면,
도 3은 본 발명의 실시 예에 따른 휴대용 단말기에서 피사계 심도가 조절된 이미지를 획득하는 과정을 도시한 흐름도,
도 4는 본 발명의 실시 예에 따른 블러링 하는 화면을 도시한 도면,
도 5는 본 발명의 실시 예에 따른 휴대용 단말기에서 제 1 이미지와 제 2 이미지가 일치하도록 이미지의 위치를 보정하는 방법을 도시한 흐름도,
도 6은 본 발명의 실시 예에 따른 휴대용 단말기에서 위치 보정을 위한 화면을 도시한 도면 및
도 7은 본 발명의 실시 예에 따른 휴대용 단말기에서 피사계 심도를 조절하기 위하여 블록별 위치를 확인하는 방법을 도시한 도면.
본 발명은 카메라를 구비하는 휴대용 단말기의 촬영 장치 및 방법에 관한 것으로서, 특히 휴대용 단말기의 카메라를 이용하여 피사체에 초점을 두고 배경의 이미지를 흐리게 하여 촬영하는 아웃 포커싱 기술에 관한 것이다.
최근 이동통신 기술의 급격한 발달에 따라 특히 무선 음성 통화 및 정보 교환이 가능한 휴대용 단말기는 필수품이 되었다. 상기 휴대용 단말기 초기에는 단순히 휴대할 수 있고, 무선 통화가 가능한 것으로 인식되었으나, 그 기술이 발달함에 따라, 단순한 전화 통화 또는 일정 관리 등의 목적뿐만 아니라 장착된 디지털 카메라에 의한 이미지 촬영하거나, 위성 방송의 시청 및, 게임 등 그 활용범위가 갈수록 커지고 있다.
특히, 카메라가 장착된 휴대용 단말기의 보급으로 휴대용 단말기의 사용자들은 다양한 이미지를 언제 어디서나 손쉽게 촬영할 수 있게 되었다. 또한, 상기 휴대용 단말기에 장착된 카메라의 지원 화소가 높아서 디지털 카메라의 역할을 대신 수행하기도 한다.
하지만, 일반적으로 휴대용 단말기의 카메라는 기구적 특성상 이미지 촬영시 피사체와의 초점거리가 매우 짧고 조리개가 매우 적게 열린 상태로 고정되어 있기 때문에 카메라의 피사계 심도(Depth of field)가 깊어 특정 거리의 피사체에만 초점을 맞추는 이미지를 구현하기가 매우 어렵고 전체 화면에 초점이 잡힌 사진의 촬영만 가능하다. 상기 카메라의 심도라 함은 사진에서 물체가 선명하게 표현되기 위 한 카메라의 초점이 위치하는 거리의 범위를 말한다. 상기 카메라의 심도를 조절하여 피사체에만 초점을 맞추어 상기 피사체를 강조하여 주변 배경을 흐르게 촬영하는 아웃 포커싱 기법의 사진 촬영이 가능하지만 상기 휴대용 단말기를 이용한 이미지 촬영은 상기 아웃 포커싱 기법의 촬영이 어렵다.
따라서, 상기 이미지 촬영이 가능한 휴대용 단말기에서 피사체 심도를 조절하여 사용자에게 다양한 이미지 촬영 방법을 제공하기 위한 장치 및 방법이 요구된다.
상술한 바와 같은 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은 피사계 심도가 조절된 이미지의 촬영이 가능한 휴대용 단말기의 장치 및 방법을 제공함에 있다.
본 발명의 다른 목적은 두 개의 카메라가 부착된 휴대용 단말기의 아웃 포커싱 기능을 제공하는 장치 및 방법을 제공함에 있다.
상기 목적들을 달성하기 위한 본 발명의 제 1 견지에 따르면, 휴대용 단말기를 이용한 촬영 장치에 있어서, 피사체를 촬영하여 제 1 이미지를 획득하는 제 1 카메라와, 상기 제 1 카메라와 동시에 상기 피사체를 촬영하여 제 2 이미지를 획득하는 제 2 카메라와, 상기 제 1 이미지의 블록을 상기 제 2 이미지에서 검색하고 상기 제 2 이미지에서 검색된 블록이 배경에 포함된 블록인지 피사체에 포함된 블록인지 확인하고 상기 배경에 포함된 블록으로 확인되면 상기 블록을 블러 링(Blurring)하는 효과 처리기를 포함하여 구성된 것을 특징으로 한다.
상기 목적들을 달성하기 위한 본 발명의 제 2 견지에 따르면, 휴대용 단말기를 이용한 촬영 방법에 있어서, 제 1 카메라를 이용하여 제 1 이미지를 획득하고, 제 2 카메라를 이용하여 제 2 이미지를 획득하는 과정과, 상기 제 1 이미지의 미리 정한 크기의 블록 중에서 상기 제 2 이미지와 비교하지 않은 블록을 선택하는 과정과, 상기 선택한 블록을 상기 제 2 이미지에서 검색하여 상기 선택한 블록이 배경에 포함되는 블록인지 피사체에 포함되는 블록인지 확인하는 과정과, 상기 선택한 블록이 배경에 포함된 블록으로 확인되면 상기 블록을 블러링(Blurring) 하는 것을 특징으로 한다.
이하 본 발명의 바람직한 실시 예를 첨부된 도면의 참조와 함께 상세히 설명한다. 그리고, 본 발명을 설명함에 있어서, 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략한다.
이하 본 발명은 두 개의 카메라가 장착된 휴대용 단말기를 이용하여 피사계 심도가 조절된 이미지를 획득하기 위한 장치 및 방법에 관하여 설명할 것이다. 도 1은 본 발명에 따른 휴대용 단말기의 구성을 도시한 블록도이다. 상기 도 1을 참조하면, 상기 휴대용 단말기는 효과처리기(100), 제 1 카메라(102), 제 2 카메라(104), 입력부(106), 표시부(108), 메모리부(110), 효과처리부(112), 제어 부(114) 및 위치 보정부(116)를 포함하여 구성된다. 상기 효과 처리부(112), 제어부(114), 위치 보정부(116)는 상기 효과 처리기(100)에 포함하여 구성할 수 있으나 상세한 설명을 위해 이하 설명에서 각각의 장치로 나누어서 설명한다.
상기 효과 처리기(100)는 상기 효과 처리부(112)를 통해 상기 제 1 이미지의 블록이 배경에 포함된 블록으로 확인되면 상기 블록을 블러링(Blurring)하도록 한다. 상기 제어부(114)는 상기 제 1 카메라(102)를 통해 제 1 이미지를 미리 정한 크기의 블록으로 분할한 후 상기 분할된 블록 중에서 상기 제 2 이미지와 비교하기 위한 블록을 선택한다.
상기 위치 보정부(116)는 상기 제 1, 2 카메라(102, 104)를 통해 동일한 방향에 초점을 맞춘 이미지를 획득하여 피사체와 배경을 구분해야 하는데 물리적인 이유로 상기와 같은 이미지의 획득에 실패할 경우에 제 1 카메라(102)와 상기 제 2 카메라(104)를 통해 촬영된 이미지(제 1 이미지, 제 2 이미지)의 상, 하 편차를 확인하여 상기 이미지의 초점 방향을 동일하도록 처리한다.
상기 물리적인 이유의 예로 상기 제 1, 2 카메라(102, 104)가 다른 방향의 촬영이 가능한 휴대용 단말기일 경우 사용자에 의해 상기 제 1, 2 카메라(102, 104)의 위치 고정시 미세하게 초점 방향이 어긋나는 경우와 동일 방향으로 촬영하도록 상기 제 1, 2 카메라(102, 104)가 고정되어 있는 휴대용 단말기일 경우 상기 카메라(102, 104)의 초점 방향에 미세한 오차가 발생하는 제품이 출고되는 경우 등이 있다.
상기 효과 처리부(112)는 상기 제 1 이미지의 모든 블록 중 하나의 블록을 제어부(114)로부터 선택받아 상기 선택받은 블록과 동일한 블록의 위치를 상기 제 2 이미지에서 검색하고 상기 선택받은 블록과 상기 제 2 이미지에서 검색한 블록간의 위치 차이를 확인하고 상기 확인된 위치 차이가 미리 정한 위치 임계값보다 작으면 피사체가 아닌 배경으로 판단하여 저주파 필터링을 통하여 블러링(Blurring) 효과가 적용된 이미지를 생성하도록 한다.
상기 위치 임계값은 상기 블록의 이미지가 파사체인지 배경인지 구분하는 기준이 되는 값이다. 예를 들어 도 2(a)와 같이 상기 제 1, 2 카메라(102, 104)를 이용하여 원거리의 나무를 배경으로 근거리에 있는 꽃을 피사체로 초점을 맞추어 촬영하면 도 2(b)와 같이 근거리에 있는 피사체인 꽃이 우측에 위치하는 제 1 이미지(201)와 상기 피사체인 꽃이 좌측에 위치하는 제 2 이미지(203)가 획득되며 상기 위치의 변화가 없는 배경은 상기 위치 임계값이 작고 상기 위치의 변화가 많은 피사체는 상기 위치 임계값이 크다.
상기 저주파 필터링을 통한 블러링(Blurring) 하는 방법은 상기 블록의 색 편차가 미리 정한 색편차 임계값보다 작으면 상기 블록에 포함된 픽셀의 주변에 위치한 다수의 픽셀의 색상과 밝기 등의 평균값을 확인하고 상기 확인된 평균값으로 상기 블록에 포함된 픽셀의 색상과 밝기를 조절한다.
상기 제 1 카메라(102)와 제 2 카메라(104)는 피사계 심도가 조절된 이미지를 획득하기 위하여 이미지를 촬영한다. 상기 메모리부(110)는 본 발명에 따라 피사계 심도가 조절되어 촬영된 이미지를 저장한다. 상기 입력부(106)는 0 ~ 9의 숫자키 버튼들과, 메뉴버튼(menu), 취소버튼(지움), 확인버튼, 통화버튼(TALK), 종료 버튼(END), 인터넷접속 버튼, 네비게이션 키(또는 방향키) 등 다수의 기능키와 이미지 촬영을 위한 촬영 버튼을 구비한다.
상기 표시부(108)는 상기 휴대용 단말기의 동작 중에 발생되는 상태 정보, 제한된 숫자의 문자들, 다량의 동영상 및 정지영상 등을 디스플레이한다. 상기 표시부(108)는 컬러 액정 디스플레이 장치(LCD : Liquid Crystal Display)를 사용할 수 있고 저장된 메시지를 출력하며, 본 발명에 따라 상기 제 1, 2 카메라(102, 104)에 의해 촬영된 상기 제 1, 2 이미지를 디스플레이한다.
도 3은 본 발명의 실시 예에 따른 휴대용 단말기에서 피사계 심도가 조절된 이미지의 획득 과정을 도시한 흐름도이다. 이하 설명에서 도 4는 두 개의 카메라를 구비하는 상기 휴대용 단말기에서 블러링 효과를 처리하는 화면을 나타낸 도면이다.
상기 도 3을 참조하면, 먼저 효과 처리기(100)는 301단계에서 사용자의 키 조작에 의해 이미지 촬영을 위한 키 입력 여부를 확인한다. 만일, 상기 키 입력이 확인되지 않으면, 상기 효과 처리기(100)는 321단계로 진행하여 해당 기능(예 : 대기 모드)을 수행한다.
한편, 상기 키 입력이 확인되면, 상기 효과 처리기(100)는 303단계로 진행하여 아웃 포커싱 촬영 모드의 설정 유무를 확인한다. 여기에서 상기 아웃 포커싱 촬영 모드는 복잡한 주변 배경을 흐릿하게 정리하고 피사체, 즉 대상물만 초점을 두어 선명하게 부각되는 효과를 가지는 이미지의 촬영을 위한 촬영 모드를 말한다. 만일, 상기 아웃 포커싱 촬영 모드가 설정되지 않으면, 상기 효과 처리기(100)는 321단계로 진행하여 해당 기능(예 : 일반 촬영 모드)을 수행한다.
한편, 상기 아웃 포커싱 촬영 모드가 설정되면, 상기 효과 처리기(100)는 305단계로 진행하여 상기 휴대용 단말기의 장착된 두 개의 카메라(제 1 카메라, 제 2 카메라)를 이용하여 제 1 이미지, 제 2 이미지를 획득한다. 상기 제 1 이미지, 제 2 이미지는 각각의 카메라(102, 104)를 통해 획득한 이미지로 둘 중 어느 한 이미지는 피사체의 이동을 확인하기 위한 기준이되는 이미지가 되며 이하 설명에서는 상기 제 1 이미지를 기준 이미지로서 설명한다.
이후, 상기 효과 처리기(100)는 307단계로 진행하여 위치 보정부(116)를 제어하여 상기 제 1, 2 이미지의 위치를 보정한다. 제 1, 2 이미지의 보정은 상기 두 개의 카메라(102, 104)가 동일한 방향에 초점을 맞춘 이미지를 획득하여 피사체와 배경을 구분해야 하는데 상기와 같은 이미지의 획득에 실패할 경우에 소프트 웨어적으로 카메라의 초점 방향을 일치하도록 하는 과정을 말한다. 상기 307단계의 이미지의 위치 보정은 아래 도 5에서 자세히 후술한다.
상기 307단계에서 상기 이미지의 위치 보정을 완료하면, 상기 효과 처리기(100)는 309단계로 진행하여 제 1 이미지를 다수개의 블록으로 분할하고 상기 분할된 모든 블록을 상기 제 2 이미지에서의 검색 완료 여부를 확인한다.
상기 제 1 이미지와 제 2 이미지의 블록 확인은 도 4(a)와 같이 상기 제 1 이미지를 미리 정한 크기(예 : 가로 8픽셀 세로 8픽셀 또는 가로 16픽셀 세로 16픽셀)의 블록으로 분할하고 처음 블록부터 순차적으로 선택하여 도 4(b)의 상기 제 2 이미지에서 상기 제 1 이미지의 블록과 동일한 블록의 위치를 확인하며, 상기 제 1 이미지를 다수개의 블록으로 분할하는 과정은 처음 1회만 수행한다. 또한, 상기 동일한 블록이라 함은 상기 제 2 이미지에서 상기 제 1 이미지의 분할된 블록과 동일한 영역을 말한다.
만일, 상기 제 1 이미지의 모든 블록의 동일한 블록을 상기 제 2 이미지에서의 검색을 완료하면, 상기 효과 처리기(100)는 본 알고리즘을 종료한다. 한편, 상기 제 1 이미지의 모든 블록의 동일한 블록을 상기 제 2 이미지에서의 검색이 완료되지 않으면, 상기 효과 처리기(100)는 311단계로 진행하여 상기 제 1 이미지의 모든 블록 중 상기 제 2 이미지에서 검색하지 않은 블록을 선택한 후 313단계로 진행하여 상기 선택된 제 1 이미지의 블록과 동일한 블록의 위치를 미리 정한 방법으로 상기 제 2 이미지에서 검색한다. 상기 313단계의 과정은 아래 도 7에서 자세히 후술한다.
이후, 상기 효과 처리기(100)는 315단계로 진행하여 상기 제 1 이미지와 제 2 이미지의 블록 위치를 비교한 후, 317단계로 진행하여 제 2 이미지의 블록이 미리 정한 위치 임계값보다 적게 이동하였는지 확인한다. 만일, 상기 블록이 위치 임계값보다 많이 이동하였으면, 상기 효과처리기(100)는 상기 블록이 피사체임으로 판단하여 블러링(Blurring)을 하지 않고 상기 309단계의 과정을 재수행한다.
한편, 상기 블록이 위치 임계값보다 적게 이동하였으면, 상기 효과 처리기(100)는 상기 블록이 피사체가 아닌 배경으로 판단하여 319단계로 진행하여 효과 처리부(112)를 제어하여 상기 제 1 이미지의 해당 블록을 흐리게 하는 블러 링(Blurring)을 한다. 이후, 상기 효과 처리기(100)는 309단계의 과정을 반복 수행하여 도 4(c)와 같이 피사계 심도가 조절된 아웃 포커싱 이미지를 획득한다.
도 5는 본 발명의 실시 예에 따른 두 개의 카메라가 장착된 휴대용 단말기에서 제 1 이미지와 제 2 이미지의 위치를 보정하는 과정을 도시한 흐름도이다. 이하 설명에서 도 6은 상기 휴대용 단말기를 이용하여 획득된 이미지의 위치를 보정하는 방법을 나타내는 도면이다.
상기 도 5를 참조하면, 위치 보정부(116)는 먼저 501단계에서 제 1 이미지와 제 2 이미지의 위치를 보정하기 위하여 상기 제 1 이미지의 미리 정한 블록으로 상기 제 2 이미지에서의 검색 완료를 확인한다. 예를 들어 도 6(a)와 같이 제 1 카메라(102)를 통해 촬영된 이미지(제 1 이미지)에 피사체가 존재할 가능성이 적은 영역(예 : 좌, 우측의 상/하단부)에 미리 정한 크기의 블록으로 할당한 후 상기 제 1 이미지의 블록을 상기 제 2 이미지에서 검색하여 위치를 확인한다.
만일, 상기 제 1 이미지의 미리 정한 블록의 확인이 완료되지 않으면, 상기 위치 보정부(116)는 503단계로 진행하여 상기 제 1 이미지의 미리 정한 블록 중 검색하지 않은 블록을 선택한 후, 상기 위치 보정부(116)는 505단계로 진행하여 상기 제 1 이미지의 블록과 동일한 블록 위치를 상기 제 2 이미지에서 검색한다. 이후, 상기 위치 보정부(116)는 507단계로 진행하여 상기 제 1 이미지의 블록과 동일한 블록의 위치를 상기 제 2 이미지에서 검색한 후 상기 제 1 이미지를 기준으로 상기 제 2 이미지가 이동한 평균 이동 값을 구하기 위하여 상기 확인된 위치를 저장한 다. 이후 상기 위치 보정부(116)는 상기 501단계의 과정부터 재수행한다.
만일, 상기 501단계의 확인결과, 상기 제 1 이미지의 미리 정한 블록을 상기 제 2 이미지와 비교하여 모두 검색하면, 상기 위치 보정부(116)는 509단계로 진행하여 상기 507단계에서 확인된 상기 제 1 이미지의 미리 정한 블록들과 상기 제 2 이미지에서 검색한 블록들간의 위치 차이를 이용하여 상기 제 2 이미지에서 검색한 블록들의 평균 이동 값을 측정하고 상기 위치 보정부(116)는 511단계로 진행하여 상기 확인된 평균 이동 값만큼 상기 제 2 이미지를 상, 하로 이동하여 위치를 보정한다.
도 7은 본 발명의 실시 예에 따른 두 개의 카메라를 구비하는 휴대용 단말기에서 촬영된 제 2 이미지에서 제 1 이미지와 동일한 블록을 확인하는 과정을 도시한 흐름도이다.
상기 도 7을 참조하면, 효과처리부(114)는 먼저 701단계에서 상기 도 3의 311단계에서 선택된 제 1 이미지의 블록으로 제 2 이미지의 모든 영역에 대하여 상기 블록과 동일한 블록의 검색을 완료하였는지 검사한다. 만일, 상기 제 2 이미지의 모든 영역에 대하여 상기 동일한 블록의 검색이 완료되지 않으면, 상기 효과처리부(114)는 703단계로 진행하여 상기 도 3의 311단계에서 효과 처리기(100)의 제어부(114)로부터 선택받은 상기 제 1 이미지의 블록과 비교하고자 하는 블록을 상기 제 2 이미지에서 선택한다.
상기 제 2 이미지에서 상기 제 1 이미지의 블록과 비교하고자 하는 블록을 선택하는 방법은 상기 제 1 이미지의 블록의 위치와 동일한 위치에 시작하며 상기 동일한 위치에서 검색할 때에 하나의 픽셀 또는 미리 정한 픽셀의 범위로 상, 하, 좌, 우로 이동하여 상기 제 2 이미지를 모두 검색한다.
이후, 상기 효과처리부(114)는 705단계로 진행하여 상기 제 1 이미지의 선택된 블록과 상기 제 2 이미지에서 선택한 블록의 색 편차를 확인한다. 여기에서 상기 색 편차는 상기 제 1 이미지의 선택된 블록과 상기 제 2 이미지에서 선택한 블록이 동일한 블록인지 확인하는 방법으로 상기 제 1 이미지와 제 2 이미지의 선택한 블록간 또는 픽셀간의 색을 비교하여 확인한다.
상기 색 편차를 구하는 방법은 상기 제 1 이미지에서 선택한 블록의 픽셀의 위치를 비교 대상인 블록(제 2 이미지에서 검색된 블록)에서 순차적으로 동일한 위치의 픽셀과 각각 비교하여 각각의 픽셀 간의 차이의 절대 값을 측정하고 상기 측정된 각각의 절대 값의 합으로 확인하며 상기 색 편차가 작을수록 상기 제 1 이미지의 선택된 블록과 상기 제 2 이미지의 선택한 블록이 동일한 블록임을 뜻한다.
이후, 상기 효과처리부(114)는 707단계로 진행하여 상기 705단계에서 확인된 색 편차가 미리 정한 색편차 임계값보다 작은지 확인한다. 상기 색편차 임계값은 상기 제 1 이미지의 선택된 블록과 동일한 블록을 상기 제 2 이미지에서 확인하기 위한 값으로 만일 상기 색 편차가 미리 정한 색편차 임계값보다 크거나 같으면 상기 효과처리부(114)는 동일하지 않은 블록으로 판단하고 상기 제 1 이미지의 블록과 동일한 블록을 확인하기 위하여 701단계의 과정을 반복 수행한다. 한편, 상기 색 편차가 미리 정한 색편차 임계값보다 적으면 상기 효과처리부(114)는 상기 제 1 이미지의 블록과 동일한 블록으로 판단하고 본 알고리즘을 종료한다.
만일, 701단계의 확인결과, 상기 제 1 이미지의 블록으로 상기 제 2 이미지의 모든 영역의 확인이 완료되면, 상기 효과처리부(114)는 319단계로 진행하여 해당 블록을 블러링 처리한다.
한편 본 발명의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.
상술한 바와 같이, 일반적인 휴대용 단말기에 구비된 카메라를 이용하여 피사체만을 강조하여 촬영하는 효과를 얻지 못하는 문제점을 휴대용 단말기에 두 개의 카메라(102, 104)를 장착함으로써 촬영하고자 하는 이미지의 배경과 피사체를 구분하여 상기 피사체에 초점을 맞춘 것과 같은 효과를 가지는 아웃 포커싱 촬영이 가능하다.

Claims (16)

  1. 휴대용 단말기를 이용한 촬영 장치에 있어서,
    피사체를 촬영하여 제 1 이미지를 획득하는 제 1 카메라와,
    상기 제 1 카메라와 동시에 상기 피사체를 촬영하여 제 2 이미지를 획득하는 제 2 카메라와,
    상기 제 1 이미지의 블록을 상기 제 2 이미지에서 검색하고 상기 제 2 이미지에서 검색된 블록이 배경에 포함된 블록인지 피사체에 포함된 블록인지 확인하고 상기 배경에 포함된 블록으로 확인되면 상기 블록을 블러링(Blurring)하는 효과 처리기를 포함하여 구성된 것을 특징으로 하는 장치.
  2. 제 1항에 있어서,
    상기 효과처리기는,
    상기 제 1 이미지를 미리 정한 크기의 블록으로 분할한 후 상기 분할된 블록 중에서 상기 제 2 이미지와 비교하기 위한 블록을 선택하는 제어부와,
    상기 제어부로부터 선택받은 제1 이미지의 일부 블록과 동일한 블록을 상기 제 2 이미지에서 검색하고 상기 제 2 이미지에서 검색된 블록이 배경에 포함된 블록인지 피사체에 포함된 블록인지 확인하고 상기 배경에 포함된 블록으로 확인되면 상기 블록을 블러링(Blurring)하는 효과 처리부를 포함하는 것을 특징으로 하는 장 치.
  3. 제 1항에 있어서,
    상기 제 1, 2 카메라는 동일한 초점 방향으로 피사체를 촬영하는 것을 특징으로 하는 장치.
  4. 제 2항에 있어서,
    상기 효과 처리부는,
    상기 제어부로부터 선택받은 상기 제 1 이미지의 블록과 동일한 블록을 상기 제 2 이미지에서 검색하고 상기 제 1 이미지의 선택받은 블록과 상기 제 2 이미지에서 검색한 블록의 위치 차이를 측정하고 상기 측정한 위치 차이가 미리 정한 위치 임계값보다 작으면 상기 블록을 배경에 포함된 블록으로 판단하는 것을 특징으로 하는 장치.
  5. 제 1항에 있어서,
    상기 블러링은,
    상기 블록에 포함된 픽셀의 주변에 위치한 다수의 픽셀의 색상과 밝기 등의 평균값을 확인하고 상기 확인된 평균값으로 상기 블록에 포함된 픽셀의 색상과 밝기를 조절하여 처리하는 것을 특징으로 하는 장치.
  6. 제 1항에 있어서,
    상기 효과 처리기는,
    상기 블록이 배경에 포함된 블록인지 피사체에 포함된 블록인지 확인하기 전에 상기 제어부의 제어를 받아 상기 제 1, 2 이미지의 초점 방향이 동일하도록 처리하는 위치 보정부를 더 포함하는 것을 특징으로 하는 장치.
  7. 제 6항에 있어서,
    상기 위치 보정부는,
    상기 제 1 이미지의 미리 정한 블록을 상기 제 2 이미지에서 검색하고 상기 제 2 이미지에서 검색한 블록의 위치와 상응하는 제 1 이미지의 미리 정한 블록간의 위치 차이를 측정하고 상기 측정한 위치 차이를 이용하여 상기 제 2 이미지에서 검색된 블록의 평균 이동 값을 측정하고 상기 측정한 평균 이동 값만큼 상기 제 2 이미지를 이동하여 위치를 보정하는 것을 특징으로 하는 장치.
  8. 제 7항에 있어서,
    상기 위치 차이는 상기 제 1, 2 카메라의 초점 방향에 따라 상, 하의 위치 차이를 측정하는 것을 특징으로 하는 장치.
  9. 휴대용 단말기를 이용한 촬영 방법에 있어서,
    제 1 카메라를 이용하여 제 1 이미지를 획득하고, 제 2 카메라를 이용하여 제 2 이미지를 획득하는 과정과,
    상기 제 1 이미지의 미리 정한 크기의 블록 중에서 상기 제 2 이미지와 비교하지 않은 블록을 선택하는 과정과,
    상기 선택한 블록을 상기 제 2 이미지에서 검색하여 상기 선택한 블록이 배경에 포함되는 블록인지 피사체에 포함되는 블록인지 확인하는 과정과,
    상기 선택한 블록이 배경에 포함된 블록으로 확인되면 상기 블록을 블러링(Blurring) 하는 것을 특징으로 하는 방법.
  10. 제 9항에 있어서,
    상기 분할한 블록 중에서 상기 제 2 이미지와 비교하지 않은 블록을 선택하는 과정부터 상기 선택한 블록이 배경으로 확인되면 상기 블록을 블러링(Blurring)하는 과정은 상기 분할한 모든 블록의 선택이 완료될 때까지 반복하는 것을 특징으 로 하는 방법.
  11. 제 9항에 있어서,
    상기 선택한 블록이 배경에 포함되는 블록인지 피사체에 포함되는 블록인지 확인하는 과정은,
    상기 제 1 이미지의 블록 중에서 상기 제 2 이미지와 비교하지 않은 하나의 블록을 선택받은 후 상기 제 1 이미지의 미리 정한 블록과 동일한 블록을 상기 제 2 이미지에서 검색하는 과정과,
    상기 선택받은 블록과 상기 제 2 이미지에서 검색된 블록간의 위치 차이를 확인하여 상기 확인된 위치 차이를 위치 임계값과 비교하는 과정과,
    상기 위치 차이가 상기 위치 임계값보다 작으면 상기 블록을 배경에 포함된 블록으로 판단하고, 상기 위치 차이가 상기 위치 임계값보다 크거나 같으면 상기 기 블록을 피사체에 포함된 블록으로 판단하는 과정을 포함하는 것을 특징으로 하는 방법.
  12. 제 11항에 있어서,
    상기 동일한 블록을 확인하는 과정은,
    상기 제 1 이미지의 선택된 블록과 비교할 블록을 상기 제 2 이미지에서 선 택하는 과정과,
    상기 제 1 이미지의 선택된 블록과 상기 제 2 이미지에서 선택한 블록의 색편차를 확인하는 과정과,
    상기 색 편차가 미리 정한 색 편차 임계값보다 작으면 상기 제 1, 2 이미지의 블록을 동일한 블록으로 판단하는 과정을 포함하는 것을 특징으로 하는 방법.
  13. 제 9항에 있어서,
    상기 제 1, 2 이미지의 획득하는 과정과 상기 배경에 포함되는 블록인지 피사체에 포함되는 블록인지 확인하는 과정 사이에 상기 제 1, 2 이미지의 초점 방향을 보정하는 과정을 더 포함하는 것을 특징으로 하는 방법.
  14. 제 13항에 있어서,
    상기 제 1, 2 이미지의 위치를 보정하는 과정은,
    상기 제 1 이미지의 미리 정한 블록을 상기 제 2 이미지에서 검색하는 과정과,
    상기 제 2 이미지에서 검색한 블록의 위치와 각각 상응하는 제 1 이미지의 미리정한 블록간의 위치 차이를 측정하는 과정과,
    상기 측정한 위치 차이를 이용하여 상기 제 2 이미지에서 검색된 블록의 평 균 이동 값을 측정하고 상기 측정한 평균 이동 값만큼 상기 제 2 이미지를 이동하여 위치를 보정하는 것을 특징으로 하는 방법.
  15. 제 14항에 있어서,
    상기 제 1 이미지의 미리 정한 블록은 피사체가 존재할 가능성이 적은 영역에 위치하는 것을 특징으로 하는 방법.
  16. 제 15항에 있어서,
    상기 제 1 이미지의 미리 정한 블록은 상기 제 1이미지의 가장자리 부근에 위치하는 것을 특징으로 하는 방법.
KR1020060029413A 2006-03-31 2006-03-31 휴대용 단말기를 이용한 아웃 포커싱 촬영 장치 및 방법 KR100657522B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020060029413A KR100657522B1 (ko) 2006-03-31 2006-03-31 휴대용 단말기를 이용한 아웃 포커싱 촬영 장치 및 방법
CNA200710001600XA CN101047769A (zh) 2006-03-31 2007-01-09 用于使用便携式终端失焦拍摄的装置和方法
US11/729,011 US20070229697A1 (en) 2006-03-31 2007-03-28 Apparatus and method for out-of-focus shooting using portable terminal
EP07105480A EP1841215A3 (en) 2006-03-31 2007-04-02 Apparatus and method for out-of-focus shooting using portable terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020060029413A KR100657522B1 (ko) 2006-03-31 2006-03-31 휴대용 단말기를 이용한 아웃 포커싱 촬영 장치 및 방법

Publications (1)

Publication Number Publication Date
KR100657522B1 true KR100657522B1 (ko) 2006-12-15

Family

ID=37733287

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060029413A KR100657522B1 (ko) 2006-03-31 2006-03-31 휴대용 단말기를 이용한 아웃 포커싱 촬영 장치 및 방법

Country Status (4)

Country Link
US (1) US20070229697A1 (ko)
EP (1) EP1841215A3 (ko)
KR (1) KR100657522B1 (ko)
CN (1) CN101047769A (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101348596B1 (ko) 2008-01-22 2014-01-08 삼성전자주식회사 임장감 생성 장치 및 방법
US9613403B2 (en) 2013-03-28 2017-04-04 Samsung Electronics Co., Ltd. Image processing apparatus and method
WO2018199542A1 (ko) * 2017-04-26 2018-11-01 삼성전자 주식회사 전자 장치 및 전자 장치의 영상 표시 방법
KR20190110404A (ko) * 2018-03-20 2019-09-30 김정훈 휴대전자기기의 아웃포커스 시뮬레이터
KR102105028B1 (ko) 2018-11-15 2020-04-27 주식회사 아이에스피디 심도 예측을 이용한 아웃포커스 장치 및 방법

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101510098B1 (ko) * 2007-12-21 2015-04-08 삼성전자주식회사 디지털 영상 처리 장치에서 영상의 배경흐림 효과 처리장치 및 방법
TWI524755B (zh) * 2008-03-05 2016-03-01 半導體能源研究所股份有限公司 影像處理方法、影像處理系統及電腦程式
JP5117889B2 (ja) * 2008-03-07 2013-01-16 株式会社リコー 画像処理装置及び画像処理方法
KR101571333B1 (ko) * 2009-01-22 2015-11-24 삼성전자주식회사 디지털 영상 처리 장치
JP2011250177A (ja) * 2010-05-27 2011-12-08 Toshiba Corp カメラモジュール及び画像記録方法
CN102479321B (zh) * 2010-11-26 2016-10-26 罗普特（厦门）科技集团有限公司 差异影像自动识别系统及方法
JP6218378B2 (ja) * 2012-12-27 2017-10-25 キヤノン株式会社 画像処理装置及び画像処理方法
CN108769497B (zh) * 2013-06-13 2021-01-15 核心光电有限公司 双孔径变焦数字摄影机
US10944917B2 (en) * 2013-09-16 2021-03-09 Kyle L. Baltz Camera and image processing method
US9973671B2 (en) * 2014-08-27 2018-05-15 Symbol Technologies, Llc Method and apparatus for directing data capture devices in a mobile unit with a single operation
TWI554098B (zh) * 2014-10-07 2016-10-11 緯創資通股份有限公司 錄影裝置與錄影方法
JP2019207635A (ja) * 2018-05-30 2019-12-05 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドＳｚ Ｄｊｉ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．，Ｌｔｄ 移動体、画像生成方法、プログラム、及び記録媒体

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19980065789A (ko) * 1997-01-14 1998-10-15 김광호 다중초점 영상 입력 장치

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09181966A (ja) * 1995-12-22 1997-07-11 Olympus Optical Co Ltd 画像処理方法及び装置
JP2002300373A (ja) * 2001-03-30 2002-10-11 Minolta Co Ltd 画像処理方法、画像処理装置、記録媒体及びプログラム
US7286168B2 (en) * 2001-10-12 2007-10-23 Canon Kabushiki Kaisha Image processing apparatus and method for adding blur to an image
US7606417B2 (en) * 2004-08-16 2009-10-20 Fotonation Vision Limited Foreground/background segmentation in digital images with differential exposure calculations
US7692696B2 (en) * 2005-12-27 2010-04-06 Fotonation Vision Limited Digital image acquisition system with portrait mode
JP4970468B2 (ja) * 2006-02-14 2012-07-04 デジタルオプティックス・コーポレイション・ヨーロッパ・リミテッド 画像ぼかし処理

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19980065789A (ko) * 1997-01-14 1998-10-15 김광호 다중초점 영상 입력 장치

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101348596B1 (ko) 2008-01-22 2014-01-08 삼성전자주식회사 임장감 생성 장치 및 방법
US9613403B2 (en) 2013-03-28 2017-04-04 Samsung Electronics Co., Ltd. Image processing apparatus and method
WO2018199542A1 (ko) * 2017-04-26 2018-11-01 삼성전자 주식회사 전자 장치 및 전자 장치의 영상 표시 방법
US11073973B2 (en) 2017-04-26 2021-07-27 Samsung Electronics Co., Ltd. Electronic device and method for electronic device displaying image
US11604574B2 (en) 2017-04-26 2023-03-14 Samsung Electronics Co., Ltd. Electronic device and method for electronic device displaying image
KR20190110404A (ko) * 2018-03-20 2019-09-30 김정훈 휴대전자기기의 아웃포커스 시뮬레이터
KR102438771B1 (ko) 2018-03-20 2022-08-31 김정훈 휴대전자기기의 아웃포커스 시뮬레이터
KR102105028B1 (ko) 2018-11-15 2020-04-27 주식회사 아이에스피디 심도 예측을 이용한 아웃포커스 장치 및 방법

Also Published As

Publication number Publication date
EP1841215A3 (en) 2007-11-21
US20070229697A1 (en) 2007-10-04
EP1841215A2 (en) 2007-10-03
CN101047769A (zh) 2007-10-03

Similar Documents

Publication Publication Date Title
KR100657522B1 (ko) 휴대용 단말기를 이용한 아웃 포커싱 촬영 장치 및 방법
KR100800660B1 (ko) 파노라마 영상 촬영 장치 및 방법
KR100866230B1 (ko) 파노라마 사진 촬영 방법
KR100800804B1 (ko) 파노라마 영상 촬영 방법
KR101312895B1 (ko) 파노라마 사진 촬영 방법
KR102425159B1 (ko) 샘플 이미지 세트 획득 방법 및 장치
US9794500B2 (en) Imaging device, imaging method, and image processing device
US9407884B2 (en) Image pickup apparatus, control method therefore and storage medium employing phase difference pixels
US9277201B2 (en) Image processing device and method, and imaging device
JPWO2013190899A1 (ja) 撮像装置及び自動焦点調節方法
US9288472B2 (en) Image processing device and method, and image capturing device
CN110383335A (zh) 视频内容中基于光流和传感器输入的背景减除
JPWO2014141561A1 (ja) 撮像装置、信号処理方法、信号処理プログラム
JP6096382B2 (ja) 画像処理装置、撮像装置、画像処理方法及びプログラム
US11222235B2 (en) Method and apparatus for training image processing model, and storage medium
CN111385461B (zh) 全景拍摄方法及装置、相机、移动终端
CN101459770A (zh) 数字拍摄设备及其控制方法
JP2013012940A (ja) 追尾装置及び追尾方法
CN111741187B (zh) 图像处理方法、装置及存储介质
JP2016220171A (ja) 拡張現実対象認識装置
CN104796615B (zh) 一种ois防抖马达的大像素拍摄方法、系统及移动终端
JP5451364B2 (ja) 被写体追跡装置及びその制御方法
WO2019202983A1 (ja) 撮像装置並びに距離計測方法、距離計測プログラム及び記録媒体
CN116980751A (zh) 一种视频优化方法、装置、设备和可读存储介质
CN118052721A (zh) 图像融合方法及装置、电子设备、存储介质

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121129

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20131128

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20141127

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20151127

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20161129

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20171129

Year of fee payment: 12

LAPS Lapse due to unpaid annual fee