KR101237673B1 - 디지털 이미지들 획득 관련 방법 - Google Patents

디지털 이미지들 획득 관련 방법 Download PDF

Info

Publication number
KR101237673B1
KR101237673B1 KR1020097000658A KR20097000658A KR101237673B1 KR 101237673 B1 KR101237673 B1 KR 101237673B1 KR 1020097000658 A KR1020097000658 A KR 1020097000658A KR 20097000658 A KR20097000658 A KR 20097000658A KR 101237673 B1 KR101237673 B1 KR 101237673B1
Authority
KR
South Korea
Prior art keywords
camera
image
digital
landscape
user
Prior art date
Application number
KR1020097000658A
Other languages
English (en)
Other versions
KR20090031725A (ko
Inventor
요한 빈트마르크
첸롱 야오
사미 니에미
Original Assignee
모바일 이미징 인 스웨덴 아베
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 모바일 이미징 인 스웨덴 아베 filed Critical 모바일 이미징 인 스웨덴 아베
Publication of KR20090031725A publication Critical patent/KR20090031725A/ko
Application granted granted Critical
Publication of KR101237673B1 publication Critical patent/KR101237673B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/18—Signals indicating condition of a camera member or suitability of light
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00—Stereoscopic photography
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00—Stereoscopic photography
    • G03B35/16—Stereoscopic photography by sequential viewing
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/02—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with scanning movement of lens or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681—Motion detection
    • H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Studio Circuits (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)

Abstract

디지털 카메라에 의해, 파노라믹 이미지로 통합될 적어도 2개의 디지털 이미지를 획득하는 방법은, 제 1 디지털 이미지를 포착하는 단계 - 여기서, 제 1 풍경이 이미지화됨 - ; 상기 디지털 카메라에 의해 보여지는 제 2 풍경이 변하는 동안, 상기 디지털 카메라에 의해 보여지는 제 2 풍경과 상기 제 1 풍경 간의 관계를 결정하는 단계; 상기 제 1 및 제 2 디지털 이미지들의 통합이 용이하도록 제 2 디지털 이미지에서 상기 디지털 카메라에 의해 포착되는 적절한 풍경이 식별되도록, 상기 디지털 카메라에 의해 보여지는 상기 제 1 풍경과 상기 제 1 풍경 간의 관계를 분석하는 단계; 및 제 2 디지털 이미지를 포착하도록 적절한 뷰(view)을 향해 상기 카메라가 지향되었다는 것을 사용자에게 표시하는 단계를 포함한다.

Description

디지털 이미지들 획득 관련 방법{A METHOD IN RELATION TO ACQUIRING DIGITAL IMAGES}
본 발명은 디지털 카메라에 의해 적어도 2개의 디지털 이미지들을 획득하는 방법에 관한 것으로, 디지털 이미지들은 조합된 이미지로 통합된다(stitched).
풍경(landscape) 이미지들을 포착하기 위해 디지털 카메라를 이용할 때, 종종 넓은 시야각을 갖는 이미지가 요구될 수 있다. 이는 풍경의 큰 이미지를 생성하기 위해 서로 통합될 다수의 이미지들을 포착함으로써 인위적으로 생성될 수 있다.
통합된 이미지의 가장 효율적인 결과는 서로 통합되기에 적절한 이미지들을 포착함으로써 얻어질 수 있다. 이와 관련하여, 이미지들은 적절한 오버랩 및 양호한 정렬(good alignment)로 포착되어야 한다. 오버랩은 이미지들이 시임없이(seamlessly) 서로 통합될 것을 요구한다. 또한, 최종 파노라믹 이미지는 파노라마를 형성하는 다수의 이미지들 중 최저(lowest) 이미지의 상부 및 최고(highest) 이미지의 하부에 의해 수직 방향으로 제한된다. 따라서, 양호한 정렬은 최대 또는 거의 최대 수직 치수로 최종 파노라믹 이미지가 생성될 수 있게 한다.
숙련된 사진기자라도 파노라믹 이미지를 생성하는데 있어 최적의 적절한 이 미지들을 포착하는 것은 어렵다. 적절한 결과를 달성하기 위해서는 삼각대 사용이 요구될 수 있다.
따라서, 파노라믹 이미지를 형성하기에 적절한 이미지들을 취하는데 있어 사용자를 돕는 것이 요구된다. US 2005/0168594에서는, 파노라믹 사진을 생성하기 위한 이미지-촬영(image-taking) 과정을 통해 사용자를 안내하는 방법이 개시된다. 본 발명의 방법에 따라, 알고리즘은 앞서 기록된 이미지로 촬영되는 순차적 이미지의 정렬을 돕기 위해 이미지-촬영 프로세스 동안 라이브 이미지에 따라 중첩되고 이동되는 표시(indicia)를 디스플레이한다.
따라서, 디스플레이는 앞서 기록된 이미지의 일부 및 기록될 이미지의 일부를 동시에 사용자에게 나타낸다. 이는 사용자가 이미지들을 서로 정확히 배열하고 상관시킬 있도록 돕는다.
파노라믹 이미지들을 획득하기 위해 사용자들을 돕는 또 다른 방법은, 피. 바우디쉬(P. Baudisch), 디. 단(D. Tan), 디.스티들리(D. Steedly), 이. 루돌프(E. Rudolph), 엠. 유텐데리(M. Uyttendaele), 씨.폴(C. Pal), 및 알.스제리스키(R. Szeliski)의 OZCHI 2005 논문 "파노라믹 뷰파인더: 사용자들이 파노라믹 사진들에서의 결함 발생 방지를 돕기 위한 실시간 시연 제공"에 개시된다. 이 방법에 따라, 파노라믹 뷰파인더가 사용되어, 사용자에게 3개의 상이한 형태의 정보를 동시에 제시한다; (1) 시연(preview)은 현재 상태에서의 완성 파노라마를 제시한다, (2) 뷰파인더는 카메라가 순간적으로 볼 수 있는 것을 제시한다, 그리고 (3) 실시간 크롭핑(cropping) 프레임은 사용자가 즉시 슛팅(shooting)을 중단시키는 경우 크롭핑 이후 파노라마가 갖게 되는 범위를 제시한다.
그러나, 파노라믹 이미지들은 때로 밝은(bright) 환경에서 포착되며, 이는 이미지들의 오버랩 관찰을 어렵게 하여 이미지 촬영 프로세스에서 사용자를 도울 때 디스플레이가 비효율적이게 한다. 또한, 자화상(self-portrait)이 요구될 경우에는, 사용자가 뷰파인더를 볼 수 없어 전혀 도움이 되지 못한다.
따라서, 서로 통합될 몇 개의 이미지들을 촬영시 사용자를 돕는 개선된 사용자 인터페이스가 요구된다.
본 발명의 목적은 조합된 이미지로 통합될 이미지들의 촬영시 사용자를 돕는 방법을 제공하는 것이다. 본 발명의 특정 목적은 자화상을 찍을 때 그리고 밝은 환경에서 효율적인 방법을 제공하는 것이다.
하기 설명을 통해 명확해질 본 발명의 상기 목적들 및 다른 목적들은 임의의 독립항들에 따른 방법에 의해 적어도 부분적으로 달성된다. 특정 실시예들은 종속항들에서 개시된다.
본 출원과 관련하여, "조합된 이미지(combined image)"란 용어는 적어도 2개의 포착된 이미지들의 조합으로 형성된 이미지로 해석되어야 한다. 포착된 이미지들은 장방형(oblong)인 파노라믹 이미지로 형성되며 넓은 각도의 풍경을 나타낼 수 있다. 그러나 포착된 이미지들은 임의의 방식으로 서로와 관련될 수 있다. 예를 들어, 이들은 n×m 형태의 매트릭스일 수 있고, 여기서 n 및 m은 임의의 수이다. 또한, 조합된 이미지가 직사각형일 필요는 없다. 반대로, 포착된 이미지들은 임의의 형상의 조합된 이미지를 형성하도록 서로 통합될 수 있다.
따라서, 본 발명의 제 1 면에 따라, 디지털 카메라에 의해, 조합된 이미지로 통합될 적어도 2개의 디지털 이미지들을 획득하는 방법은, 제 1 디지털 이미지를 포착하는 단계 ― 여기서, 제 1 풍경이 이미지화됨 ― ; 디지털 카메라에 의해 보여지는 제 2 풍경이 변하는 동안, 디지털 카메라에 의해 보여지는 제 2 풍경과 제 1 풍경 간의 관계를 결정하는 단계; 제 1 및 제 2 디지털 이미지들을 통합(stitching)이 용이하도록 제 2 디지털 이미지에서 디지털 카메라에 의해 포착되는 적절한 뷰(view)를 식별하기 위해, 디지털 카메라에 의해 보여지는 제 2 풍경과 제 1 풍경 간의 관계를 분석하는 단계; 및 제 2 디지털 이미지를 포착하도록 카메라가 적절한 뷰를 향해 지향되는 것을 사용자에게 표시하는 단계를 포함하며, 상기 표시하는 단계는 사용자가 감촉할 수 있는(tactile) 신호를 방출하는 단계를 포함한다.
상기 방법에 의해, 디지털 카메라는 이전에 포착된 이미지와 포착될 이미지 간의 관계를 결정한다. 따라서, 카메라 자체는 포착될 이미지에서 이미지화될 뷰(view)를 결정한다. 다음, 사용자는 디지털 카메라로부터의 표시(indication)에 따라 안내받고 카메라는 이미지 포착을 위해 적절히 지향된다. 따라서, 조합된 이미지들의 획득을 돕기 위한 사용자 가이던스는 밝은 환경 및 심지어 사용자가 뷰파인더를 볼 수 없을 때에도(이를 테면, 자화상을 찍을 때에도) 달성될 수 있다.
상기 방법은 이미지화되는 제 2 풍경이 카메라에 의해 결정되기 때문에, 이미지들을 포착하는 사용자 제어를 없앤다. 그러나 이는 카메라가 보다 효율적인 방식으로 사용자를 안내할 수 있게 한다.
사용자에게 카메라가 적절한 뷰를 향해 지향되었다는 표시는 반드시 제 2 디지털 이미지를 포착하기 위한 최적의 뷰로 사용자를 안내할 것을 요구하지 않는다. 이러한 표시는 현재의 뷰가 최적의 뷰로부터 얼마나 멀리 있는지에 대한 정보를 사용자에게 제공할 수 있다. 따라서, 사용자는 이러한 정보를 사용자가 적절한 이미지를 발견할 때 제 2 디지털 이미지의 포착을 제어하는데 이용할 수 있다. 또한, 상기 표시는, 카메라가 제 2 이미지의 적절한 뷰로부터의 방향으로 이동할 때의 상황을 사용자에게 알려줄 수 있다. 이런 상황에서, 카메라가 적절한 뷰로부터 너무 멀리 이동하여, 포착된 이미지가 더 이상 통합되기에 적합하지 않게 되기 전에 제 2 이미지가 포착된다는 표시가 제공될 수 있다. 따라서, 상기 표시는 제 2 이미지가 포착되게 할 수 있으며, 상기 제 2 이미지는 통합을 위해 특히 적절한 뷰를 나타내지는 않지만, 제 2 이미지는 제 1 이미지로 통합될 수 있는 뷰를 나타낸다. 신체는 접촉 감각에 매우 빠르게 반응한다. 따라서, 사용자에 의해 감지될 수 있는 임의의 형태의 메시지 또는 신호를 방출함으로써, 사용자는 신호에 매우 빠르게 반응할 수 있다.
감촉할 수 있는 신호는 다양한 방식으로 달성될 수 있다. 이는 작은 전기 임펄스, 온도 변화 또는 감지 변화 형태일 수 있다.
예를 들어, 상기 방출은 제 1 풍경 및 제 2 풍경 간의 관계를 사용자에게 알리기 위한 진동기(vibrator)의 활성화를 포함할 수 있다. 진동기는 디지털 카메라가 이동할 때 추적(tracking) 동안 활성화되며(activated) 이미지를 포착하기 위한 적절한 뷰를 향해 카메라가 지향된다는 것을 나타내기 위해 비활성화될 수 있다(deactivated). 이는 카메라의 이동시 사용자가 연속적으로 안내받을 수 있다는 것을 의미한다. 가이던스는 밝은 또는 화려한(noisy) 환경에 의해 영향을 받지 않으며, 이는 사용자가 카메라를 보유하는 사용자의 손에 의해 진동기의 비활성화를 감지할 수 있기 때문이다. 다음 사용자는 카메라가 적절히 지향되었다는 것을 알게 된다.
물론, 진동기는 사용자와의 통신을 위해 다양한 방식으로 이용될 수 있다. 예를 들어, 진동기는 역방식(reverse manner)으로 사용될 수 있다, 즉, 진동기는 카메라가 적절히 지향될 때 짧은 기간 동안 활성화된다. 진동기의 세기는 카메라가 최적의 뷰 또는 적절한 뷰를 향해 지향된 것으로부터 얼마나 멀리 벗어났는지에 대해 사용자와 통신하기 위해 선택적으로 변할 수 있다.
본 발명의 제 2 면에 따라, 카메라에 의해 조합된 이미지로 통합될 적어도 2개의 이미지를 획득하는 방법은, 제 1 이미지를 포착하는 단계 ― 여기서, 제 1 풍경이 이미지화됨 ―; 디지털 카메라에 의해 보여지는 제 2 풍경이 변하는 동안, 디지털 카메라에 의해 보여지는 제 2 풍경과 제 1 풍경 간의 관계를 결정하는 단계; 제 1 및 제 2 디지털 이미지들의 통합이 용이하도록 제 2 디지털 이미지에서 디지털 카메라에 의해 포착되는 적절한 뷰를 식별하기 위해, 디지털 카메라에 의해 보여지는 제 2 풍경과 제 1 풍경 간의 관계를 분석하는 단계; 및 제 2 디지털 이미지를 포착하기 위해 카메라가 적절한 뷰를 향해 지향되었다는 것을 사용자에게 표시하는 단계를 포함하며, 상기 표시하는 단계는 음성 신호를 방출하는 단계를 포함한다.
이러한 방법에 의해, 디지털 카메라는 이전에 포착된 이미지와 포착될 이미지 간의 관계를 결정한다. 따라서, 카메라 자체는 포착되는 이미지에서 이미지화될 뷰를 결정한다. 다음 사용자는 카메라가 이미지 포착을 위해 적절히 지향되었다는 것을 디지털 카메라로부터의 표시에 의해 안내받는다. 따라서, 조합된 이미지들의 획득을 돕는 사용자 가이던스는 밝은 환경 및 심지어 사용자가 뷰파인더를 볼 수 없을 때에도(이를 테면, 자화상을 찍을 때에도) 달성될 수 있다.
상기 방법은 이미지화되는 제 2 풍경이 카메라에 의해 결정되기 때문에, 이미지들을 포착하는 사용자 제어를 없앤다. 그러나 이는 카메라가 보다 효율적인 방식으로 사용자를 안내할 수 있게 한다.
사용자에게 카메라가 적절한 뷰를 향해 지향된다는 표시는 제 2 디지털 이미지를 포착하기 위한 최적의 뷰로 사용자를 반드시 안내할 것을 요구하지 않는다. 이러한 표시는 현재의 뷰가 최적의 뷰로부터 얼마나 멀리 벗어나 있는지에 대한 정보를 사용자에게 제공할 수 있다. 따라서, 사용자는 이러한 정보를 사용자가 적절한 이미지를 발견할 때 제 2 디지털 이미지의 포착을 제어하는데 이용할 수 있다. 또한 상기 표시는, 카메라가 제 2 이미지의 적절한 뷰로부터 벗어난 방향으로 이동할 때의 상황을 사용자에게 알려줄 수 있다. 이런 상황에서, 카메라가 적절한 뷰로부터 너무 멀리 벗어나 이동하여, 포착된 이미지가 더 이상 통합되기에 적합하지 않게 되기 전에 제 2 이미지가 포착된다는 표시가 제공될 수 있다. 따라서, 상기 표시는 제 2 이미지가 포착되게 할 수 있으며, 상기 제 2 이미지는 통합을 위해 특히 적절한 뷰를 나타내지는 않지만, 제 2 이미지는 제 1 이미지로 통합될 수 있는 뷰를 나타낸다.
예를 들어, 음성 신호를 방출하는 단계는 제 1 풍경과 제 2 풍경 간의 관계를 사용자에게 알리기 위해 음성 신호를 방출하는 단계를 포함할 수 있다. 음성 신호를 방출하는 단계는 디지털 카메라가 이동할 때 추적(tracking) 동안 활성화되고 카메라가 이미지 포착을 위해 적절한 뷰를 향해 지향되었다는 것을 나타내도록 비활성화될 수 있다. 그 다음 사용자는 카메라가 적절히 지향되었다는 것을 알 수 있다. 이는 사용자가 카메라의 이동시 연속적으로 안내받고 가이던스가 밝은 환경에 영향을 받지 않는다는 것을 의미한다.
물론, 음성 신호는 사용자와의 통신을 위해 다른 방식으로 이용될 수 있다. 예를 들면, 음성 신호는 역방식(reverse manner)으로 이용될 수 있다, 즉, 음성 신호의 방출은 카메라가 적절히 지향되었을 때 짧은 기간 동안 활성화된다. 음성 신호의 세기는 최적의 뷰 또는 적절한 뷰를 향해 지향된 것으로부터 카메라가 얼마나 멀리 벗어났는지에 대해 사용자와 통신하도록 선택적으로 변할 수 있다.
제 2 풍경은 다양한 방식으로 변할 수 있다. 풍경은 카메라의 정면에서 이루어지는 이동에 의해 변경될 수 있다. 이런 경우, 카메라 정면의 풍경이 변하는 동안 카메라는 여전히 고정될 수 있다. 다음, 고정 카메라에 의해 몇 개의 이미지들이 촬영될 수 있다. 배경을 중심으로 한 이동들은 조합된 이미지로 표시될 수 있다. 따라서, 조합된 이미지는 서로의 상부에 위치되는 몇 개의 이미지들의 조합일 수 있다.
선택적으로, 제 2 풍경은 이동되는 카메라에 의해 변할 수 있다. 결정하는 단계는 디지털 카메라에 의해 보여지는 제 2 풍경을 기준으로 제 1 풍경의 위치 추적을 지속하는(keeping) 단계를 포함할 수 있다. 이 경우, 카메라는 이동되며 따라서 카메라에 의해 보여지는 풍경이 변한다. 제 1 풍경과 제 2 풍경 변화 간의 관계는 제 1 이미지에 통합되기에 적합하게 제 2 이미지가 포착될 수 있도록 모니터링된다.
일 실시예에 따라, 제 2 풍경을 기준으로 제 1 풍경의 위치 추적을 지속하는 단계는 이미지들을 비교하는 단계를 포함한다. 이는 카메라의 이동은 카메라가 지향되는 뷰들을 비교함으로써 모니터링된다는 것을 의미한다. 이는 이를 테면, 뷰파인더에 의해 포착되는 작은 이미지들을 일시적으로 연속적으로 비교함으로써 구현된다. 비교는 제 2 풍경과 제 1 풍경 간의 관계를 지속적으로 업데이트하기 위해 이전에 포착된 임의의 일시적 이미지들에 대해 이루어질 수 있다.
또 다른 실시예에 따라, 제 2 풍경을 기준으로 제 1 풍경의 위치 추적을 지속하는 단계는 디지털 카메라의 방향 변화를 감지하는 단계를 포함한다. 감지하는 단계는 예를 들어, 디지털 카메라의 임의의 회전을 검출하는 자이로스코프(gyroscope)에 의해 달성될 수 있다. 선택적으로, 감지하는 단계는 콤파스(compass)에 의해 달성될 수 있고, 지자계(earth's magnetic field)와 관련한 회전들이 검출될 수 있다. 디지털 카메라의 시야각을 인지함으로써, 디지털 카메라의 허용된 회전(allowed rotation)이 설정될 수 있다. 또한, 상기 방법은 제 2 풍경의 변화와 관련된 정보를 사용자와 통신하는 단계를 포함할 수 있다. 이는 카메라가 카메라 이동의 상태에 대한 정보를 사용자에게 제공하여, 카메라가 풍경의 적절한 파트를 향해 지향될 수 있도록 이동을 안내할 수 있다는 것을 의미한다.
일 실시예에 따라, 통신하는 단계는 디지털 카메라에 의해 보여지는 제 2 풍경과 제 1 풍경 간의 관계의 개략적 표현을 디스플레이하는 단계를 포함할 수 있다. 이는 뷰파인더의 상세사항들(details)을 분별하기 어려울 때 밝은 환경으로 사용자를 안내할 수 있다.
또한, 상기 방법은 카메라가 적절한 뷰를 향해 지향될 때 제 2 디지털 이미지를 포착하는 단계를 더 포함하며, 상기 포착하는 단계는 디지털 카메라에 의해 자동으로 수행된다.
이런 방식으로, 조합된 이미지를 획득하는 자동화 방법이 달성된다. 따라서, 사용자는 제 2 및 순차적 이미지들을 획득하는 동안 포착 버튼을 누를 필요가 없다. 이는 포착 버튼의 누름으로 인해 카메라가 위치를 벗어나 이동할 수 없다는 것을 의미한다. 대신, 사용자는 전체적으로 카메라 조준시 정확한 방향으로 포커싱할 수 있다.
또한, 사용자와 카메라의 이동과 관련된 정보의 통신은 이미지가 획득된 것으로 카메라가 표시할 때 다양한 위치들에서 카메라의 이동을 사용자가 일시적으로 중단시킬 수 있게 허용한다. 따라서, 모션 블러(motion blur)가 방지되고 고품질의 선명한 이미지들(sharp images)이 획득될 수 있다.
이러한 방법은 조합된 이미지를 형성하기 위한 몇 개의 이미지들이 매우 빠르게 포착될 수 있게 허용한다. 사용자는 이미지들의 획득을 시작하기 위해 간단히 포착 버튼을 누르고 이미지화되는 풍경에 대해 카메라를 스윕핑(sweep)한다. 사용자는 또 다른 이미지의 포착이 허용되도록 카메라의 스윕핑을 일시적으로 중단할 때 연속적으로 안내받는다.
이는 조합된 이미지의 생성을 위한 이미지들의 획득을 위해 사용자를 도울 수 있는 상당히 자동화된 방법이다. 사용자는 이미지들을 포착하는 시기와 관련하여 임의의 결정을 취할 필요가 없다. 사실, 일단 사용자가 조합된 이미지를 획득하는 과정을 시작하면, 사용자는 단지 카메라에 의해 통신되는 명령들만을 따를 수 있다. 특히, 사용자는 카메라의 뷰파인더를 볼 필요가 없으므로 밝은 환경 또는 어두운 환경에서 자화상 또는 조합된 이미지를 획득할 수 있다.
표시하는 단계는 이미지가 이미지의 실제 포착에 앞서 자동으로 포착될 것이라는 정보를 사용자와 통신하는 단계를 포함할 수 있다. 이는 제 2 디지털 이미지가 포착되기 전에 사용자가 디지털 카메라의 이동을 중단시킬 수 있다는 것을 의미한다. 따라서, 모션 블러가 효과적으로 소거될 수 있다.
자동 포착은 제 2 이미지가 거의 포착되었다는 정보를 사용자와 통신한 후 예정된 시간 기간 수행될 수 있다. 대안적으로, 자동 포착은 카메라의 이동이 중단되었다는 검출에 응답하여 수행될 수 있다.
분석하는 단계는 적절한 뷰를 식별하기 위해 적절한 이미지들 간의 예정된 원하는 오버랩을 사용할 수 있다. 이러한 오버랩은 카메라의 광학적 셋업(set-up)에 맞게 설정될 수 있어, 이미지들을 획득하기 위한 프로그램된 알고리즘을 사용함으로써 최적의 조합된 이미지들이 얻어질 수 있다.
대안에 따라, 분석하는 단계는 제 2 디지털 이미지를 포착하기에 적절한 조건들이 나타나는지를 결정하는 단계를 포함할 수 있다. 예를 들어, 분석(analysis)은 카메라가 거의 움직이지 않는다는 것을 검출할 수 있다. 이런 경우, 조건들은 제 2 이미지가 적절히 포착될 수 있게 하는 것들이다. 움직임이 있다 하더라도, 카메라가 단지 약간만 움직이기 때문에, 모션 블러가 방지된다. 따라서, 카메라가 통합되기에 적절한 뷰에서 조준되고 카메라의 이러한 미-이동(non-movement) 조건들이 나타나면, 제 2 디지털 이미지를 포착하기 위한 결정이 취해질 수 있다. 대안적으로, 분석은 카메라가 이전에 포착된 이미지들을 합치기에 특히 적절한 뷰를 향해 지향된다는 것을 검출할 수 있다. 이는 카메라가 당시 이동하더라도, 제 2 디지털 이미지를 포착하는 데 있어 적절한 조건들로서 검출될 수 있다. 다음 표시는 이미지가 포착되자마자 사용자와 통신되어, 적절한 위치에서 사용자가 카메라의 이동을 중단시키게 허용한다. 이후, 제 2 디지털 이미지가 포착된다.
또한, 상기 방법은 디지털 카메라의 원하는 이동에 대한 애니메이션을 디스플레이하는 단계를 포함할 수 있으며, 애니매이션은 디지털 카메라의 실제 이동과 동기화된다. 이러한 애니메이션은 카메라가 어떻게 이동하는지를 사용자가 쉽게 이해할 수 있게 한다. 예를 들어, 애니메이션은 카메라가 단지 회전되었고, 카메라의 임의의 선형 이동 또는 임의의 상하(tilting) 이동이 파노라믹 이미지가 포착될 경우 이루어지지 않는다는 것을 사용자에게 나타낼 수 있다.
본 발명의 제 3 면에 따라, 디지털 카메라에 의해, 조합된 이미지로 통합될 적어도 2개의 디지털 이미지들을 획득하는 방법은, 제 1 디지털 이미지를 포착하는 단계 ― 여기서, 제 1 풍경이 이미지화됨 ― ; 제 1 풍경을 부분적으로 오버랩하는 제 2 풍경을 향해 카메라가 지향되도록 사용자가 디지털 카메라를 이동시키게 허용하는 단계; 제 2 디지털 이미지가 자동으로 거의 포착되었다는 것을 사용자와 통신하는 단계; 및 제 2 디지털 이미지를 자동으로 포착하는 단계를 포함한다.
상기 방법은 이미지들의 획득시 사용자가 조합된 이미지를 형성하도록 도우며, 여기서 이미지들에서의 모션 블러가 방지된다. 사용자는 이미지가 실제로 포착되기 이전에 디지털 이미지가 포착된다는 것을 지시받기 때문에, 사용자는 카메라의 이동을 중단시킬 수 있다. 제 2 이미지의 자동 포착은 사용자가 포착 버튼을 누름으로 인한 모션 블러가 형성되지 않는다는 것을 의미한다. 또한, 몇 개의 순차적 이미지들이 포착될 때, 규칙적인 간격을 두고 사용자와의 통신이 이루어질 수 있다. 이는 사용자가 풍경 스윕핑시 도움받아 합치기에 적절한 이미지들을 포착할 수 있다는 의미한다. 사용자는 카메라의 적절한 방향과 관련한 임의의 결정을 할 필요가 없기 때문에, 사용자는 안정되고 일정한 방식으로 카메라를 이동시킬 수 있다. 이는 인접한 이미지들 간의 시야각(viewing angle)의 차가 풍경의 스윕핑 동안 일정할 수 있다는 것을 의미한다. 따라서, 이미지들을 포착하는 동안 이미지화된 풍경들 간의 관계와 관련하여 분석이 이루어지지 않더라도, 사용자는 카메라에 의해 조합된 이미지로 합치기에 적절한 이미지들을 얻도록 도움받는다.
사용자에 대한 통신은 본 발명의 제 1 면 및 제 2 면을 참조로 앞서 개시된 다양한 방식으로 달성될 수 있다.
제 2 디지털 이미지의 자동 포착은 상기 통신 이후 예정된 시간 기간에서 수행될 수 있다. 예정된 시간 기간은 제 2 디지털 이미지가 포착되기 이전에 사용자가 카메라의 이동을 중단시키도록 허용하는 임의의 적절한 시간 기간일 수 있다. 이러한 예정된 시간 기간은 통상적으로 1초 미만일 수 있다.
대안적으로, 상기 방법은 디지털 카메라의 이동 중단(stopped movement)을 검출하는 단계를 더 포함하며, 여기서 제 2 디지털 이미지의 자동 포착은 이동 중단의 검출에 응답하여 수행된다. 이는 제 2 디지털 이미지는 임의의 모션 블러를 포함하지 않는다는 것을 확실히 보장한다는 것을 의미한다.
본 발명의 제 4면에 따라, 디지털 카메라에 의해, 조합된 이미지로 통합될 적어도 2개의 디지털 이미지를 획득하는 방법은, 제 1 디지털 이미지를 포착하는 단계 ― 여기서, 제 1 풍경이 이미지화됨 ― ; 제 2 풍경을 향해 카메라가 지향되도록 사용자가 디지털 카메라를 이동시키도록 허용하는 단계; 디지털 카메라의 이동 중단을 검출하는 단계; 및 이동 중단의 검출에 응답하여 제 2 디지털 이미지를 자동 포착하는 단계를 포함한다.
본 발명의 이러한 면에 따라, 이미지가 포착될 때 사용자는 카메라의 위치설정을 제어한다. 카메라의 이동 중단에 의해, 사용자는 이미지의 포착을 개시할 수 있다. 이는 임의의 모션 블러없이 이미지들이 포착될 수 있다는 것을 의미한다. 또한, 디지털 카메라의 이동 중단의 검출에 응답하여 이미지들이 자동으로 포착되기 때문에, 이미지들은 매우 빠르게 포착될 수 있다. 이는 사용자가 빠른 방식으로 카메라를 이동시킬 수 있게 허용하여 사용자는 안정되고 균일한 방식으로 카메라를 이동시킬 수 있다. 또한, 제 2 이미지의 자동 포착은 사용자가 포착 버튼을 누름으로 인한 모션 블러가 형성되지 않는다는 것을 의미한다.
본 발명은 첨부되는 도면을 일례로 참조하여 보다 상세하게 설명된다.
도 1은 본 발명의 실시예에 따른 방법의 흐름도.
도 2는 상기 방법에 이용되는 디지털 카메라의 개략도.
도 1을 참조로, 조합된 이미지로 통합될 디지털 이미지들을 획득시 사용자를 안내하는 방법이 개시된다.
사용자는 디지털 카메라의 조합된 이미지 포착 모드에서 포착 버튼을 누름으로써 디지털 이미지들의 획득을 개시한다(단계 10). 따라서, 카메라는 디지털 카메라에 의해 보여지는 제 1 풍경의 제 1 이미지를 포착하도록 활성화된다(단계 12). 또한, 카메라는 조합된 이미지를 형성하기 위한 추가의 풍경들의 적절한 뷰들을 향해 카메라를 지향시키는 데 있어 사용자를 안내하도록 활성화된다.
카메라는 카메라가 이동함에 따라 카메라에 의해 보여지는 풍경의 일시적 이미지들을 기록한다(단계 14). 이러한 일시적 이미지들은 뷰파인더 상에 디스플레이된다. 또한, 이전에 기록된 이미지는 일시적 이미지들과 비교되며 이전에 기록된 이미지에서 이미지화되는 풍경의 위치가 추적된다(단계 16). 카메라는 이전에 기록된 디지털 이미지에서 이미지화되는 풍경과 보여지는 풍경 간의 관계를 분석한다(단계 18). 이러한 분석을 기초로, 카메라는 카메라가 차후 이미지의 포착을 위한 적절한 뷰를 향해 지향되는지를 결정한다. 카메라가 적절한 뷰를 향해 지향될 때, 카메라는 디지털 이미지를 자동으로 포착한다(단계 20).
연속적으로 포착되는 일시적 이미지들은 카메라가 어떻게 이동되는지를 연속적으로 업데이트하기 위해 서로 비교될 수 있다. 이는 단지 작은 이미지들만이 서로 비교되어 비교적 낮은 추적 복잡도 계산이 유지된다는 것을 의미한다. 이전에 기록된 이미지에서 이미지화되는 풍경의 위치는 이미지를 포착한 직후 뷰파인더에 기록되는 제 1 일시적 이미지에 의해 모델링될 수 있다.
예정된 오버랩은 카메라에 프로그램될 수 있다. 따라서, 카메라는 오버랩을 결정하기 위해 보여지는 풍경을 통해 이미지화되는 풍경의 오버랩을 분석한다. 카메라가 이동하는 동안, 오버랩은 연속적으로 감소된다. 오버랩이 예정된 레벨에 도달하면, 분석은 카메라가 적절한 뷰를 향해 지향되었다고 결정한다.
예정된 오버랩은 카메라의 광학적 셋업에 적합하게 카메라가 적절히 프로그램되게 허용한다. 그러나 사용자는 조합된 이미지를 포착하기 이전에 예정된 오버랩을 변화시키도록 허용될 수 있다.
추적(tracking)은 매우 작은 뷰파인더의 이미지를 사용하기 때문에, 추적은 실시간 수행될 수 있다. 당업자들에게 인식되는 바와 같이, 추적은 임의의 적절한 방식으로 뷰파인더에서의 일시적 이미지와 앞서 기록된 이미지가 비교되고 매칭되도록 수행될 수 있다. 예를 들어, 광학적 흐름 알고리즘 또는 2차원 상관 알고리즘은 다른 이미지를 포착하기에 적절한 방식으로 이미지들이 상관되는지를 결정하기 위해 이미지들을 서로 비교하는데 이용될 수 있다.
예정된 오버랩 이용에 대한 대안으로서, 분석은 제 2 디지털 이미지를 포착하기에 적절한 조건들이 나타났는지를 결정하는 단계를 포함할 수 있다. 예를 들어, 분석은 카메라가 거의 이동하지 않았다는 것을 검출할 수 있다. 이 경우, 조건들은 제 2 이미지가 적절히 포착되게 하는 것들이다. 이동되더라도 카메라는 단지 약간만 이동되기 때문에, 모션 블러가 방지될 수 있다. 따라서, 카메라가 통합되기에 적절한 뷰로 조준되고 카메라의 이러한 미-이동(non-movement) 조건들이 나타나면, 제 2 디지털 이미지를 포착하는 결정이 이루어진다.
또 다른 대안으로서, 분석은 카메라가 이전에 포착된 이미지들에 대해 통합되기에 특히 적절한 뷰를 향해 지향된다는 것을 검출할 수 있다. 이는 당시에 카메라가 이동하더라도, 제 2 디지털 이미지를 포착하기에 적절한 조건들로서 검출될 수 있다. 다음 표시는 이미지가 포착되자마자 사용자와 통신할 수 있어 사용자는 적절한 위치에서 카메라의 이동을 중단시킬 수 있다. 이후, 제 2 디지털 이미지가 포착된다.
카메라가 적절한 뷰를 향해 지향되었다는 것으로 분석이 결정되면, 카메라는 차후 이미지를 자동으로 포착하도록 정렬된다. 이는 포착 버튼 누름과 같이, 카메라에 대한 임의의 추가적 입력을 부여할 필요가 없다는 것을 의미한다. 따라서, 사용자는 카메라가 정확히 지향되게 포커싱할 수 있고, 특히 버튼이 눌릴 때 사용자 흔들림으로 인해 위치를 벗어난 카메라 이동이 발생하지 않는다.
그러나, 대안적 실시예에 따라, 적절한 뷰를 향해 카메라가 지향되도록 사용자가 카메라에 의해 안내될 때, 사용자는 버튼을 누름으로써 각각의 이미지 포착을 개시할 수 있다.
풍경의 상이한 부분들의 이미지들을 포착하기 위해 카메라를 이동하는 동안, 카메라는 이동시 사용자를 연속적으로 안내한다. 따라서, 단계들(14-20)과 동시적으로, 카메라는 카메라를 어떻게 이동시켜야 하는지를 사용자에게 알린다. 카메라는 사용자가 카메라를 어떻게 이동시켜야 하는지에 대한 애니메이션을 디스플레이한다(단계 22). 또한, 카메라는 이미지 획득을 위해 이동을 일시적으로 중단시켜야 할 때를 표시한다(단계 24).
카메라는 다양한 상이한 방식들로 이동을 일시적으로 중단시켜야 할 때를 나타낼 수 있다. 제 1 대안에 따라, 카메라는 카메라가 이동하는 동안 진동기를 활성화시킨다. 이미지 포착을 위해 카메라가 적절히 지향될 경우, 진동기는 비활성화된다. 제 2 대안에 따라, 이미지 포착을 위해 카메라가 적절히 지향될 경우 카메라는 진동기를 활성화시킨다.
따라서, 사용자는 사용자의 손에 카메라를 보유하면서 진동기가 활성화되는 것을 감지한다. 이는 사용자와 시각적 또는 청각적 통신이 필요하지 않다는 것을 의미하며, 이는 밝은 환경 또는 어두운 환경 또는 화려한 환경에서 조합된 이미지를 포착할 때 바람직할 수 있다. 또한, 감촉할 수 있는 임펄스에 대한 물리적 응답이 매우 빨라, 사용자는 감지된 통신에 빠르게 반응할 수 있다. 진동기는 사용자와의 통신을 위해 다수의 다양한 방식들에 이용될 수 있다. 예를 들어, 진동 세기는 적절한 뷰에 도달됨에 따라 증가할 수 있고, 또는 대안적으로, 진동 세기는 적절한 풍경에 도달됨에 따라 감소될 수 있다. 따라서, 사용자는 카메라가 적절한 뷰를 향해 지향된 것으로부터 얼마나 멀리 벗어났는지에 대한 피드백을 얻을 수 있다.
제 3 대안에 따라, 카메라가 이미지 포착을 위해 적절히 지향되었을 때 카메라는 음성 신호를 방출한다. 제 4 대안에 따라, 카메라가 이동하는 동안 카메라는 음성 신호를 방출한다. 카메라가 이미지 포착을 위해 적절히 지향될 때, 음성 신호는 비활성화된다.
따라서, 사용자는 활성화되는 음성 신호를 들을 수 있다. 이는 사용자와 시각적 통신이 요구되지 않는다는 것을 의미하며, 이는 밝은 환경 또는 어두운 환경에서 조합된 이미지들을 포착할 때 바람직할 수 있다.
음성 신호는 사용자와의 통신을 위해 다수의 다양한 방식들로 이용될 수 있다. 예를 들어, 음성 신호의 음량(volume)은 적절한 뷰에 도달됨에 따라 증가될 수 있고, 또는 대안적으로, 음성 신호의 음량은 적절한 뷰에 도달됨에 따라 감소될 수 있다. 따라서, 사용자는 카메라가 적절한 뷰를 향해 지향된 것으로부터 얼마나 멀리 벗어났는지에 대한 피드백을 얻을 수 있다.
앞서 언급된 대안들은 사용자가 시각적 표시를 보는 것이 어려운 조건들에서 특히 바람직하다. 예를 들어, 이는 뷰파인더를 볼 수 없을 때 다른 조합된 이미지들 또는 파노라믹 자화상 포착을 용이하게 한다.
또 다른 대안에 따라, 앞서 기록된 이미지에서 이미지화된 풍경과 보여지는 풍경에 대한 관계의 개략도를 디스플레이한다. 앞서 기록된 이미지는 제 1 직사각형으로 표시되고 보여지는 풍경은 제 1 직사각형을 중심으로 이동된 제 2 직사각형으로 표시될 수 있다. 포착되는 차후 이미지의 원하는 위치를 나타내는 제 3 직사각형이 디스플레이될 수도 있다. 따라서, 사용자는 보여지는 풍경의 일부가 차후 이미지를 포착하기 위한 적절한 뷰와 얼마나 근접했는지를 연속적으로 볼 수 있다. 이는 카메라 뷰가 차후 원하는 뷰와 얼마나 근접했는지에 대한 연속적인 피드백을 제공하여, 사용자가 카메라를 정확히 조준하는 능력을 개선시킬 수 있다.
상기 대안들 중 2 이상은 서로 조합되어 사용될 수 있다. 이런 방식으로, 사용자의 가이던스가 보다 개선될 수 있다.
조합된 이미지에서 이미지화되는 전체 풍경이 스윕핑될 때, 이미지-포착 프로세스는 중단된다(단계 26). 사용자는 카메라의 이동을 중단시키거나 또는 버튼을 누름으로써 프로세스를 중단시킬 수 있다. 대안적으로, 서로 통합될 예정된 수의 이미지들이 포착되면 프로세스가 중단될 수 있다.
요구되는 모든 이미지들이 포착될 때, 이미지들은 하나의 거대한 조합된 이미지를 형성하도록 서로 통합된다(단계 28). 포착된 이미지들은 매칭이 용이하도록 처리될 수 있다. 이를 테면, 이미지들의 렌즈 교정 및 원통 투영(cylindrical projection)이 수행될 수 있다. 다음 포착되고 처리된 이미지들은 서로 적절히 매칭되도록 분석된다. 이는 당업자들에게 인식될 수 있는 임의의 적절한 매칭 알고리즘을 사용하여 수행될 수 있다.
대안적 실시예에 따라, 표시들은 규칙적인 시간 간격들로 포착되는 이미지를 사용자에게 제공할 수 있다. 이는 앞서 기록된 이미지에서 이미지화되는 뷰의 위치 추적이 수행되지 않는다는 것을 의미한다. 또한, 카메라가 적절한 뷰를 향해 지향되었는지 여부에 대한 분석들이 수행되지 않는다. 사용자는 카메라가 모션 블러 없이 이미지들을 포착하도록 허용하기 위해서 단지 규칙적인 시간 간격을 두고 카메라의 이동이 중단되도록 도움받는다. 이후, 포착된 이미지들은 조합된 이미지로 서로 통합될 수 있다. 이러한 이미지들의 통합(stitching)은 많은 계산을 요구하며, 이는 이미지들의 허용가능한 오버랩을 제공하는 제어가 이미지들을 포착하는 동안 발생되지 않기 때문이다. 그러나. 이미지들의 포착에 대한 규칙적 시기는 양호한 통합 결과를 달성할 수 있게 한다.
또 다른 대안적 실시예에 따라, 사용자는 이미지들이 포착될 때를 보다 제어할 수 있다. 프로세서는 카메라의 이동이 중단될 때를 검출하도록 배열된다. 이러한 미-이동에 응답하여, 이미지가 포착된다. 따라서, 포착된 이미지에서는 모션 블러가 없다. 적절한 위치들에서 카메라의 이동을 중단시킴으로써, 사용자는 이러한 위치들에서의 카메라가 이미지들을 포착하게 할 수 있다. 이미지들의 포착은 미-이동 검출이 이루어짐에 따라 자동으로 수행된다.
미-이동은 뷰파인더에 의해 포착되는 일시적 이미지들을 서로 비교함으로써 검출될 수 있다. 2개의 순차적 이미지들 간에 차이가 없거나 또는 사소한 차이가 있을 때, 이는 카메라가 이동하지 않는다는 것으로 해석될 수 있다. 보다 신뢰성있는 미-이동 검출을 위해, 3개 이상의 순차적인 일시적 이미지들 간에는 차이가 없거나 또는 단지 근소한 차이가 있어야 한다.
또 다른 대안적 실시예에 따라, 조합되는 이미지들은 카메라의 임의의 이동이 발행하지 않고도 포착될 수 있다. 대신, 카메라는 물체들이 이동하는 풍경을 향해 지향될 수 있다. 따라서, 카메라는 이동들이 이루어지는 공통 배경을 가지는 뷰의 몇 개의 이미지들을 포착할 수 있다. 이러한 이미지들은 물체들의 이동들이 공통 배경과 관련하여 표시될 수 있도록 서로의 상부에서 조합될 수 있다. 이 경우, 이전에 기록된 이미지와 보여지는 풍경 간의 차이는 단계들(16-18)을 참조로 앞서 개시된 것과 유사한 방식으로 추적될 수 있다. 이러한 차이가 예정된 한계치(threshold) 보다 크다고 결정될 때, 새로운 이미지가 포착될 수 있다.
도 2를 참조로, 앞서 개시된 방법에 따라 조합된 이미지를 포착하는데 사용될 수 있는 카메라가 개시된다. 카메라(40)는 특히 모바일 폰에 통합되기에 적합하며, 이는 모바일 폰 카메라는 특히 신속하고 간단한 방식으로 이미지들을 획득하는데 이용되기 때문이다. 그러나 본원의 방법은 임의의 종류의 디지털 카메라에서 구현될 수 있다. 카메라(40)는 카메라의 뷰가 이미지화되는 뷰파인더(42)를 포함한다. 뷰파인더(42)는 디스플레이(44)의 일부를 형성하며 카메라의 뷰의 라이브 이미지를 나타낸다. 또한, 디스플레이(44)는 조합된 이미지들을 포착하는 데 있어 사용자를 안내하도록 정렬된다. 디스플레이(44)는 카메라가 어떻게 이동해야 하는지에 대한 애니메이션을 나타낼 수 있고 또한 디스플레이(44)는 카메라의 현재 뷰에 대해 이전에 기록된 이미지의 개략적 표현을 제공할 수 있다.
또한, 카메라(40)는 카메라의 이동을 사용자에게 안내하기 위해 활성화 및 비활성화될 수 있는 진동기(46)를 포함한다. 또한, 카메라(40)는 사용자를 안내하기 위해 음성 신호를 방출할 수 있는 스피커(48)를 포함할 수 있다.
또한, 카메라(40)는 프로세서 유니트(50)를 포함한다. 프로세서 유니트(50)는 카메라의 현재 뷰를 이전에 기록된 이미지와 비교하고, 차후 이미지를 포착하기 위해 카메라가 적절한 뷰를 향해 지향되는지 여부를 결정한다. 또한, 프로세서 유니트(50)는 이미지들을 크게 조합된 이미지로 통합시키기 위해 포착된 모든 이미지들을 처리한다. 포착된 이미지들은 이미지-포착 프로세스 동안 그리고 이미지들이 서로 통합될 동안 RAM 메모리(52)에 일시적으로 저장될 수 있다. 조합된 이미지가 생성될 때, 이는 영구 메모리(permanent memory)(54)에 저장될 수 있다.
본 발명에 개시된 바람직한 실시예는 제한되지 않으며 다수의 대안적 실시예들이 첨부되는 청구항들에 의해 한정되는 보호 범주내에서 가능하다는 것을 주지해야 한다.
예를 들어, 카메라가 차후 포착을 위해 적절한 뷰를 향해 지향되었는지 여부에 대한 결정은 카메라의 방향을 검출하는 센서를 이용하여 수행될 수 있다. 이러한 센서는 예를 들어, 자이로스코프 또는 컴파스일 수 있다. 따라서, 센서는 이전 이미지를 포착할 때 카메라의 방향 정보를 저장할 수 있다. 방향에서의 변화가 임계치를 초과할 때, 차후 이미지를 포착하기 위한 시간에 대한 표시가 제공될 수 있다.

Claims (20)

  1. 디지털 카메라에 의해, 조합된 이미지로 통합(stitch)될 적어도 3개의 디지털 이미지들을 획득하기 위한 방법으로서,
    제 1 디지털 이미지를 포착하는 단계 ― 여기서, 제 1 풍경(scenery)이 이미지화됨 ― ;
    상기 디지털 카메라에 의해 보여지고 있는 제 2 풍경이 이동되고 있는 상기 디지털 카메라에 의해 변화하는 동안, 상기 제 1 풍경과 상기 디지털 카메라에 의해 보여지고 있는 상기 제 2 풍경 간의 관계를 결정하는 단계;
    상기 제 1 디지털 이미지와 제 2 디지털 이미지의 통합을 촉진하기 위한 상기 제 2 디지털 이미지 내 상기 디지털 카메라에 의해 포착될 뷰(view)를 식별하기 위하여 상기 제 1 풍경과 상기 디지털 카메라에 의해 보여지고 있는 상기 제 2 풍경 간의 상기 관계를 분석하는 단계;
    사용자에게 상기 디지털 카메라가 상기 제 1 디지털 이미지와 상기 제 2 디지털 이미지의 통합을 촉진하기 위한 상기 뷰 쪽으로 지향됨을 표시하는 단계;
    상기 디지털 카메라의 이동 중단 또는 미-이동을 검출하는 단계;
    이동 중단 또는 미-이동의 검출에 응답하여 상기 제 2 디지털 이미지를 자동으로 포착하는 단계;
    상기 제 2 풍경에 후속하여 상기 디지털 카메라에 의해 보여지고 있는 순차적(subsequent) 풍경이 이동되고 있는 상기 디지털 카메라에 의해 변화하는 동안, 상기 제 2 풍경과 상기 순차적 풍경 간의 관계를 결정하는 단계;
    상기 제 2 디지털 이미지와 상기 제 2 디지털 이미지에 후속하는 순차적 디지털 이미지의 통합을 촉진하기 위한 상기 순차적 디지털 이미지 내 상기 디지털 카메라에 의해 포착될 뷰를 식별하기 위하여 상기 제 2 풍경과 상기 순차적 풍경 간의 상기 관계를 분석하는 단계;
    사용자에게 상기 디지털 카메라가 상기 제 2 디지털 이미지와 상기 순차적 디지털 이미지의 통합을 촉진하기 위한 상기 뷰 쪽으로 지향됨을 표시하는 단계;
    상기 디지털 카메라의 이동 중단 또는 미-이동을 검출하는 단계; 및
    이동 중단 또는 미-이동의 검출에 응답하여 상기 순차적 디지털 이미지를 자동으로 포착하는 단계
    를 포함하는,
    적어도 3개의 디지털 이미지들을 획득하기 위한 방법.
  2. 제 1 항에 있어서,
    상기 자동 포착은 상기 디지털 카메라가 상기 제 1 디지털 이미지와 상기 제 2 디지털 이미지의 통합을 촉진하기 위한 상기 뷰 또는 상기 제 2 디지털 이미지와 상기 순차적 디지털 이미지의 통합을 촉진하기 위한 상기 뷰를 향해 지향될 경우 상기 이동 중단 또는 미-이동의 검출에 반응하여 수행되는,
    적어도 3개의 디지털 이미지들을 획득하기 위한 방법.
  3. 제 1 항에 있어서,
    상기 이동 중단 또는 미-이동은 상기 디지털 카메라에 의해 포착된 일시적(temporary) 이미지들을 비교함으로써 검출되는,
    적어도 3개의 디지털 이미지들을 획득하기 위한 방법.
  4. 제 1 항에 있어서,
    상기 제 1 디지털 이미지, 상기 제 2 디지털 이미지 및 상기 순차적 디지털 이미지의 통합을 촉진하기 위한 뷰를 식별하기 위하여 상기 제 1 풍경, 상기 제 2 풍경 및 상기 순차적 풍경 간의 관계를 분석하는 단계; 및
    사용자에게 상기 디지털 카메라가 상기 제 1 디지털 이미지, 상기 제 2 디지털 이미지 및 상기 순차적 디지털 이미지의 통합을 촉진하기 위한 상기 뷰 쪽으로 지향됨을 표시하는 단계
    를 더 포함하는,
    적어도 3개의 디지털 이미지들을 획득하기 위한 방법.
  5. 삭제
  6. 삭제
  7. 삭제
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 삭제
  13. 삭제
  14. 삭제
  15. 삭제
  16. 삭제
  17. 삭제
  18. 삭제
  19. 삭제
  20. 삭제
KR1020097000658A 2006-07-19 2007-07-11 디지털 이미지들 획득 관련 방법 KR101237673B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
SE0601577A SE532236C2 (sv) 2006-07-19 2006-07-19 Metod i samband med tagning av digitala bilder
SE0601577-0 2006-07-19
PCT/SE2007/000680 WO2008010762A1 (en) 2006-07-19 2007-07-11 A method in relation to acquiring digital images

Publications (2)

Publication Number Publication Date
KR20090031725A KR20090031725A (ko) 2009-03-27
KR101237673B1 true KR101237673B1 (ko) 2013-02-26

Family

ID=38957023

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020097000658A KR101237673B1 (ko) 2006-07-19 2007-07-11 디지털 이미지들 획득 관련 방법

Country Status (7)

Country Link
US (2) US7920161B2 (ko)
EP (2) EP2041620B1 (ko)
JP (1) JP2009544216A (ko)
KR (1) KR101237673B1 (ko)
CN (2) CN103227903A (ko)
SE (1) SE532236C2 (ko)
WO (1) WO2008010762A1 (ko)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7292261B1 (en) * 1999-08-20 2007-11-06 Patrick Teo Virtual reality camera
WO2009093635A1 (ja) * 2008-01-22 2009-07-30 Nikon Corporation レンズ鏡筒、レンズ鏡筒の調整方法、レンズ鏡筒の製造方法及び撮像装置
TW200937109A (en) * 2008-02-22 2009-09-01 Asia Optical Co Inc Image pickup methods and image pickup systems
US8300117B2 (en) * 2008-03-28 2012-10-30 Fuji Xerox Co., Ltd. System and method for exposing video-taking heuristics at point of capture
FR2942890A1 (fr) * 2009-03-05 2010-09-10 Thomson Licensing Procede de creation d'une suite animee de photographies, et appareil pour mettre en oeuvre le procede
SG166684A1 (en) * 2009-05-11 2010-12-29 Creative Tech Ltd A multimodal camera and a method for selecting an operation mode of a camera
JP5383576B2 (ja) * 2010-03-31 2014-01-08 富士フイルム株式会社 撮像装置、撮像方法およびプログラム
CN101872113B (zh) * 2010-06-07 2014-03-19 中兴通讯股份有限公司 一种全景照片的拍摄方法及设备
US8488040B2 (en) * 2010-06-18 2013-07-16 Microsoft Corporation Mobile and server-side computational photography
JP5907660B2 (ja) * 2011-02-28 2016-04-26 オリンパス株式会社 撮像装置
KR101784176B1 (ko) * 2011-05-25 2017-10-12 삼성전자주식회사 영상 촬영 장치 및 그 제어방법
JP2013009106A (ja) * 2011-06-23 2013-01-10 Nikon Corp 撮像装置
EP2726937B1 (en) 2011-06-30 2019-01-23 Nokia Technologies Oy Method, apparatus and computer program product for generating panorama images
US9690458B2 (en) 2012-09-10 2017-06-27 Mediatek Inc. Image viewing method for displaying portion of selected image based on user interaction input and related image viewing system and machine readable medium
US8773502B2 (en) * 2012-10-29 2014-07-08 Google Inc. Smart targets facilitating the capture of contiguous images
KR20140090318A (ko) * 2013-01-07 2014-07-17 삼성전자주식회사 햅틱 기반 카메라 운용 지원 방법 및 이를 지원하는 단말기
JP5955348B2 (ja) * 2013-05-22 2016-07-20 株式会社テレパシーホールディングス 撮影画像のプライバシー保護機能を有するウェアラブルデバイス及びその制御方法並びに画像共有システム
FR3007172B1 (fr) * 2013-06-12 2020-12-18 Renault Sas Procede et systeme d'identification d'un degat cause a un vehicule
US10474921B2 (en) * 2013-06-14 2019-11-12 Qualcomm Incorporated Tracker assisted image capture
EP3089102B1 (en) 2013-12-03 2019-02-20 ML Netherlands C.V. User feedback for real-time checking and improving quality of scanned image
CN106210539B (zh) 2013-12-13 2019-07-19 华为终端有限公司 一种获取全景图像的方法及终端
EP3748953B1 (en) * 2014-01-07 2024-04-17 ML Netherlands C.V. Adaptive camera control for reducing motion blur during real-time image capture
CN105472232B (zh) * 2014-09-05 2018-10-19 宏达国际电子股份有限公司 影像撷取方法及电子装置
US9986155B2 (en) * 2014-09-05 2018-05-29 Htc Corporation Image capturing method, panorama image generating method and electronic apparatus
WO2017042708A1 (en) * 2015-09-09 2017-03-16 Couponizer Ltd Method and system for photographing long text subjects that extend beyond borders of a viewfinder
KR101905580B1 (ko) * 2016-02-17 2018-10-11 한국전자통신연구원 촬영 기능을 갖는 모바일 장치를 이용한 상황 재연 방법 및 시스템
CN106851117B (zh) 2017-03-31 2020-01-31 联想(北京)有限公司 一种获得全景照片的方法及电子设备
US10194078B2 (en) * 2017-06-09 2019-01-29 Immersion Corporation Haptic enabled device with multi-image capturing abilities
WO2019215554A1 (en) * 2018-05-07 2019-11-14 Within Unlimited, Inc. Time‑lapse stereo macro photography systems and methods and stereo time-lapse video made with same

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1188811A (ja) 1997-09-04 1999-03-30 Sony Corp カメラ一体型ビデオレコーダおよび撮影方法

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0878963A1 (en) * 1992-10-09 1998-11-18 Sony Corporation Producing and recording images
US6466701B1 (en) * 1997-09-10 2002-10-15 Ricoh Company, Ltd. System and method for displaying an image indicating a positional relation between partially overlapping images
US6552744B2 (en) * 1997-09-26 2003-04-22 Roxio, Inc. Virtual reality camera
US6304284B1 (en) * 1998-03-31 2001-10-16 Intel Corporation Method of and apparatus for creating panoramic or surround images using a motion sensor equipped camera
JP4208113B2 (ja) * 2000-04-19 2009-01-14 富士フイルム株式会社 アルバム作成方法および装置並びに記録媒体
US6930703B1 (en) * 2000-04-29 2005-08-16 Hewlett-Packard Development Company, L.P. Method and apparatus for automatically capturing a plurality of images during a pan
US7623733B2 (en) * 2002-08-09 2009-11-24 Sharp Kabushiki Kaisha Image combination device, image combination method, image combination program, and recording medium for combining images having at least partially same background
US20040174434A1 (en) * 2002-12-18 2004-09-09 Walker Jay S. Systems and methods for suggesting meta-information to a camera user
US20040189849A1 (en) * 2003-03-31 2004-09-30 Hofer Gregory V. Panoramic sequence guide
US20040239767A1 (en) * 2003-05-29 2004-12-02 Stavely Donald J. Systems and methods for providing tactile feedback
JP2005117296A (ja) * 2003-10-07 2005-04-28 Matsushita Electric Ind Co Ltd 探索支援装置及び探索支援方法
US7656429B2 (en) 2004-02-04 2010-02-02 Hewlett-Packard Development Company, L.P. Digital camera and method for in creating still panoramas and composite photographs
JP5055686B2 (ja) * 2004-05-13 2012-10-24 ソニー株式会社 撮像システム、撮像装置、撮像方法
EP1613060A1 (en) * 2004-07-02 2006-01-04 Sony Ericsson Mobile Communications AB Capturing a sequence of images
BRPI0512824A (pt) * 2004-07-02 2008-04-22 Sony Ericsson Mobile Comm Ab método para capturar uma seqüência de imagens por um dispositivo de geração de imagem e armazenar as imagens em um formato digital, e, dispositivo de geração de imagem para capturar uma seqüência de imagens
US7375745B2 (en) * 2004-09-03 2008-05-20 Seiko Epson Corporation Method for digital image stitching and apparatus for performing the same
US7646400B2 (en) * 2005-02-11 2010-01-12 Creative Technology Ltd Method and apparatus for forming a panoramic image
JP2008537228A (ja) * 2005-04-15 2008-09-11 クリフォード・アール．・デイヴィッド 対話式撮影及び配信システム並びに関連の方法
US7424218B2 (en) * 2005-07-28 2008-09-09 Microsoft Corporation Real-time preview for panoramic images
GB2428927A (en) * 2005-08-05 2007-02-07 Hewlett Packard Development Co Accurate positioning of a time lapse camera
US20070081081A1 (en) * 2005-10-07 2007-04-12 Cheng Brett A Automated multi-frame image capture for panorama stitching using motion sensor
CN1750593A (zh) * 2005-10-13 2006-03-22 上海交通大学 具有图像拼接功能的数码相机
US7715831B2 (en) * 2006-03-24 2010-05-11 Sony Ericssson Mobile Communications, Ab Methods, systems, and devices for detecting and indicating loss of proximity between mobile devices

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1188811A (ja) 1997-09-04 1999-03-30 Sony Corp カメラ一体型ビデオレコーダおよび撮影方法

Also Published As

Publication number Publication date
CN101490617A (zh) 2009-07-22
US7920161B2 (en) 2011-04-05
US20080018748A1 (en) 2008-01-24
EP3287844A1 (en) 2018-02-28
WO2008010762A1 (en) 2008-01-24
EP3287844B1 (en) 2021-06-23
EP2041620A4 (en) 2011-04-27
US20110050960A1 (en) 2011-03-03
EP2041620A1 (en) 2009-04-01
SE0601577L (sv) 2008-01-20
EP2041620B1 (en) 2017-09-13
KR20090031725A (ko) 2009-03-27
SE532236C2 (sv) 2009-11-17
CN103227903A (zh) 2013-07-31
JP2009544216A (ja) 2009-12-10

Similar Documents

Publication Publication Date Title
KR101237673B1 (ko) 디지털 이미지들 획득 관련 방법
EP2993894B1 (en) Image capturing method and electronic apparatus
KR100800804B1 (ko) 파노라마 영상 촬영 방법
JP5659305B2 (ja) 画像生成装置および画像生成方法
KR101783059B1 (ko) 화상 처리 장치 및 그 제어 방법과 컴퓨터 판독가능한 매체
JP4579980B2 (ja) 一続きの画像の撮像
JP5865388B2 (ja) 画像生成装置および画像生成方法
US9210324B2 (en) Image processing
US20080180550A1 (en) Methods For Capturing a Sequence of Images and Related Devices
US20080080846A1 (en) Selecting autofocus area in an image
KR20140089132A (ko) 카메라를 구비하는 장치의 인물 촬영장치 및 방법
JP2006005662A (ja) 電子カメラ、及び電子カメラシステム
JP2006101186A (ja) カメラ
US10984550B2 (en) Image processing device, image processing method, recording medium storing image processing program and image pickup apparatus
US20050018066A1 (en) Method and apparatus for setting a marker on an object and tracking the position of the object
CN112995507A (zh) 提示对象位置的方法及装置
CN111742550A (zh) 一种3d影像拍摄方法、3d拍摄设备及存储介质
JP5448868B2 (ja) 撮像装置および撮像装置の制御方法
CN105472232B (zh) 影像撷取方法及电子装置
JP2005184266A (ja) 撮像装置
JPH099128A (ja) 撮影装置
US20110280444A1 (en) Camera and corresponding method for selecting an object to be recorded
CN115589470A (zh) 投影方法及投影装置
KR20200005440A (ko) 벤더블 디스플레이를 이용하여 미디어를 촬영하는 디바이스 및 그 방법
JP2018133617A (ja) 撮像装置、撮像装置が実行する制御方法、プログラム、及び記憶媒体

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
N231 Notification of change of applicant
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160119

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170119

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20180118

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20190116

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20200115

Year of fee payment: 8