KR101041178B1 - 전자기기에서 영상 녹화 방법 및 장치 - Google Patents

전자기기에서 영상 녹화 방법 및 장치 Download PDF

Info

Publication number
KR101041178B1
KR101041178B1 KR1020080046939A KR20080046939A KR101041178B1 KR 101041178 B1 KR101041178 B1 KR 101041178B1 KR 1020080046939 A KR1020080046939 A KR 1020080046939A KR 20080046939 A KR20080046939 A KR 20080046939A KR 101041178 B1 KR101041178 B1 KR 101041178B1
Authority
KR
South Korea
Prior art keywords
image frame
recording
motion vector
extracted
input
Prior art date
Application number
KR1020080046939A
Other languages
English (en)
Other versions
KR20090120896A (ko
Inventor
원치훈
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020080046939A priority Critical patent/KR101041178B1/ko
Priority to US12/437,098 priority patent/US20090290846A1/en
Publication of KR20090120896A publication Critical patent/KR20090120896A/ko
Application granted granted Critical
Publication of KR101041178B1 publication Critical patent/KR101041178B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30232—Surveillance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30236—Traffic on road, railway or crossing
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G11B2020/10537—Audio or video recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B2020/10935—Digital recording or reproducing wherein a time constraint must be met
    • G11B2020/10972—Management of interruptions, e.g. due to editing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 전자기기에서 영상 녹화 방법 및 장치에 관한 것으로서, 녹화가 일시 중시되는 시점에 마지막으로 녹화되는 영상 프레임을 추출하는 과정과, 녹화 재시작 이벤트가 발생될 시, 센서로부터 입력되는 영상 프레임과 상기 추출된 영상 프레임이 일치하는지 여부를 판단하는 과정과, 두 영상 프레임이 일치할 경우 상기 녹화 재시작을 자동으로 수행하는 과정을 포함하여, 녹화를 일시 정지하였다가 재시작하는 경우에 움직임 벡터 혹은 녹화된 마지막 프레임을 이용하여 상기 일시 정지 시에 녹화된 마지막 프레임과 상기 재시작 시에 녹화된 처음 프레임간의 차이를 제거함으로써, 영상 간에 끊김이 없는 자연스러운 촬영 영상을 제공할 수 있다.
녹화, 캠코더, 동영상, 일시 정지, 움직임 벡터(motion vector)

Description

전자기기에서 영상 녹화 방법 및 장치{APPARATUS AND METHOD FOR VIDEO RECORDING IN ELECTRONIC DEVICE}
본 발명은 전자기기에서 영상 녹화 방법 및 장치에 관한 것으로서, 특히 녹화를 일시 정지하였다가 다시 시작하는 경우에 자연스러운 녹화를 위한 방법 및 장치에 관한 것이다.
최근 들어, 멀티미디어 기술이 비약적으로 발전함에 따라 고화소의 정지영상 혹은 동영상을 촬영하여 저장하는 기능을 구비한 전자기기들이 증가되는 추세에 있다. 예를 들어, 최근 개발되는 대부분의 휴대용 단말기들은 동영상 녹화가 가능한 캠코더 기능을 구비하고 있다.
상기 캠코더 기능은 사용자가 원하는 동영상을 일정 시간 동안 녹화하여 재생 가능한 동영상 파일로 변환하는 기능을 수행한다. 일반적으로 상기 캠코더 기능은 녹화 수행 중에 사용자의 필요에 따라 상기 녹화를 일시적으로 정지한 후 다시 시작할 수 있도록 하는 일시 정지(PAUSE) 및 재시작(RESUME) 기능을 제공하고 있 다.
종래에는 상기 일시 정지 기능과 재시작 기능 사이에 어떠한 추가 기능도 제공하지 않고 있다. 즉, 사용자가 상기 녹화 기능을 일시 정지한 후 재시작하게 되면, 해당 기기는 단순히 센서를 통해 입력되는 동영상의 녹화를 일시적으로 정지한 후 재시작 이벤트가 발생될 시에 다시 상기 센서를 통해 입력되는 동영상을 녹화하게 된다. 이러한 기능은 영상을 끊김 없이 계속해서 녹화해야 할 경우 문제가 될 수 있다.
예를 들어, 움직이는 차량을 10분 동안 끊김 없이 녹화해야 할 경우를 가정해 보기로 한다. 만일, 상기 움직이는 차량을 5분 정도 녹화한 상태에서 환경적 요인 혹은 사용자의 사정으로 인하여 상기 녹화를 잠시 중지해야 할 상황이 발생되면, 사용자는 상기 녹화를 일시 정지한 후, 상기 녹화를 중지해야했던 상황을 해소한 이후 상기 녹화를 재시작하게 된다. 하지만, 이때 상기 일시 정지 시에 녹화된 마지막 영상과 상기 재시작 시에 녹화된 처음 영상이 매끄럽게 연결되지 않는 경우가 종종 발생된다. 이에 따라 사용자가 상기 차량을 처음부터 다시 녹화해야 하는 경우도 종종 발생될 수 있다.
따라서, 상기 전자기기에서 녹화를 일시 정지하였다가 다시 시작하는 경우에 녹화 영상을 매끄럽게 연결하는 기술이 제공될 필요가 있다.
본 발명은 상술한 바와 같은 문제점을 해결하기 위해 도출된 것으로서, 본 발명의 목적은 전자기기에서 영상 녹화 방법 및 장치를 제공함에 있다.
본 발명의 다른 목적은 전자기기에서 녹화를 일시 정지하였다가 다시 시작하는 경우에 자연스러운 녹화를 위한 방법 및 장치를 제공함에 있다.
본 발명의 또 다른 목적은 전자기기에서 움직임벡터를 이용하여 녹화 일시 정지로 인해 발생되는 영상 프레임 간의 차이를 제거하기 위한 방법 및 장치를 제공함에 있다.
본 발명의 또 다른 목적은 전자기기에서 녹화 기능 일시 정지 시에 녹화된 마지막 프레임을 이용하여 녹화 일시 정지로 인해 발생되는 영상 프레임 간의 차이를 제거하기 위한 방법 및 장치를 제공함에 있다.
상술한 목적들을 달성하기 위한 본 발명의 제 1 견지에 따르면, 전자기기에서 영상 녹화 방법은, 녹화가 일시 중시되는 시점에 마지막으로 녹화되는 영상 프레임을 추출하는 과정과, 녹화 재시작 이벤트가 발생될 시, 센서로부터 입력되는 영상 프레임과 상기 추출된 영상 프레임이 일치하는지 여부를 판단하는 과정과, 두 영상 프레임이 일치할 경우 상기 녹화 재시작을 자동으로 수행하는 과정을 포함하는 것을 특징으로 한다.
상술한 목적들을 달성하기 위한 본 발명의 제 2 견지에 따르면, 전자기기에서 영상 녹화 방법은, 녹화가 일시 중시되는 시점에 마지막으로 녹화되는 영상 프레임을 추출하는 과정과, 상기 추출된 영상 프레임에 알파 블랜딩(alpha blending)을 적용하는 과정과, 센서로부터 입력되는 영상 프레임과 상기 알파 블랜딩이 적용된 영상 프레임을 디스플레이하는 과정과, 녹화 재시작이 요청될 시, 녹화를 재시작하는 과정을 포함하는 것을 특징으로 한다.
상술한 목적들을 달성하기 위한 본 발명의 제 3 견지에 따르면, 전자기기에서 영상 녹화 장치는, 영상을 입력받는 카메라 센서와, 녹화가 일시 중시되는 시점에 마지막으로 녹화되는 영상 프레임을 추출하고, 녹화 재시작 이벤트가 발생될 시, 상기 카메라 센서를 통해 입력되는 영상 프레임과 상기 추출된 영상 프레임의 일치여부를 판단하여 상기 녹화 재시작 여부를 판단하는 제어부를 포함하는 것을 특징으로 한다.
상술한 목적들을 달성하기 위한 본 발명의 제 4 견지에 따르면, 전자기기에서 영상 녹화 장치는, 영상을 입력받는 카메라 센서와, 녹화가 일시 중시되는 시점에 마지막으로 녹화되는 영상 프레임을 추출하고, 상기 추출된 영상 프레임에 알파 블랜딩(alpha blending)을 적용하는 제어부와, 상기 카메라 센서를 통해 입력되는 영상 프레임과 상기 알파 블랜딩이 적용된 영상 프레임을 디스플레이하는 표시부를 포함하는 것을 특징으로 한다.
본 발명은 전자기기에서 녹화를 일시 정지하였다가 재시작하는 경우에 움직임 벡터 혹은 녹화된 마지막 프레임을 이용하여 상기 일시 정지 시에 녹화된 마지막 프레임과 상기 재시작 시에 녹화된 처음 프레임간의 차이를 제거함으로써, 영상 간에 끊김이 없는 자연스러운 촬영 영상을 제공할 수 있는 효과가 있다.
이하 본 발명의 바람직한 실시 예를 첨부된 도면을 참조하여 설명한다. 그리고, 본 발명을 설명함에 있어서, 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략한다.
이하 본 발명에서는 캠코더 기능을 지원하는 전자기기에서 움직임벡터 혹은 녹화된 마지막 프레임을 이용하여 녹화를 일시 정지하였다가 재시작하는 경우에 발생되는 영상 프레임 간의 차이를 제거하기 위한 기술에 관해 설명할 것이다.
이하 본 발명은 상기 전자기기를 이용하여 차량의 움직임을 15초간 녹화한 시점에 주변 상황 혹은 상기 차량에 문제가 발생하여 상기 녹화를 일시 정지하였다가 상기 문제가 해결된 이후에 상기 녹화를 재시작하는 상황을 가정하여 설명하기로 한다.
먼저, 상기 전자기기에서 움직임벡터를 이용하여 녹화 일시 정지 및 재시작으로 인해 발생되는 영상 프레임 간의 차이를 제거하는 기술에 대해 살펴보기로 한다.
도 1은 본 발명의 실시 예에 따른 전자기기에서 움직임벡터를 이용하여 녹화를 재시작하는 예를 도시하고 있다.
상기 도 1을 참조하면, 먼저 (a)와 같이 전자기기에서 캠코더 기능을 이용하여 움직이는 차량을 녹화하는 중에 주변 상황 혹은 상기 차량의 문제로 인해 (b)와 같이 상기 녹화를 시작한지 15초가 경과된 시점에서 사용자에 의해 녹화가 일시 정지되면, 상기 전자기기는 녹화된 마지막 영상 프레임을 추출하여 저장한다.
이후, (c)와 같이 상기 주변 상황 혹은 상기 차량의 문제가 해결되어 상기 사용자에 의해 녹화 재시작이 요청되면, 상기 전자기기는 상기 추출 및 저장된 마지막 영상 프레임과 현재 시점에 센서를 통해 입력되는 영상 프레임 간의 움직임 벡터를 계산한 후, 계산된 움직임 벡터를 기 설정된 임계값과 비교한다. 여기서, 상기 움직임 벡터는 상기 두 영상 프레임 간의 유사도를 나타내는 것으로서, 상기 움직임 벡터의 값이 작을수록 상기 두 영상 프레임이 유사함을 의미한다. 이때, 상기 전자기기는 상기 두 영상 프레임 간의 움직임 벡터값을 참조하여 상기 센서를 통해 입력되는 다음 영상 프레임과 상기 마지막 영상 프레임이 유사해지도록 (d)와 같이 상기 전자기기 자신의 위치, 각도 및 방향을 조절하거나 상기 센서의 위치, 각도 및 방향을 조절할 수도 있다.
상기 전자기기는 상기 두 영상 프레임 간의 움직임 벡터와 기 설정된 임계값을 계속해서 비교하여 상기 움직임 벡터가 기 설정된 임계값보다 작을 시에 (e)와 같이 상기 두 영상 프레임이 일치함을 판단하고, (f)와 같이 상기 사용자의 요청에 따른 녹화 재시작을 자동으로 수행한다.
도 2는 본 발명의 실시 예에 따른 전자기기에서 녹화된 마지막 영상 프레임을 이용하여 녹화를 재시작하는 예를 도시하고 있다.
상기 도 2를 참조하면, 먼저 (a)와 같이 전자기기에서 캠코더 기능을 이용하여 움직이는 차량을 녹화하는 중에 주변 상황 혹은 상기 차량의 문제로 인해 (b)와 같이 상기 녹화를 시작한지 15초가 경과된 시점에서 사용자에 의해 녹화가 일시 정지되면, 상기 전자기기는 녹화된 마지막 영상 프레임을 추출하여 저장한다.
이후, (c)와 같이 상기 주변 상황 혹은 상기 차량의 문제가 해결되고 상기 사용자에 의해 녹화 재시작 준비가 요청되면, 상기 전자기기는 (d)와 같이 상기 추출 및 저장된 마지막 영상 프레임에 알파 블랜딩(Alpha Blending)을 적용한다. 이후, 상기 전자기기는 (e)와 같이 상기 알파 블랜딩이 적용된 마지막 프레임을 OSD(On Screen Display) 채널에 투명하게 디스플레이하고, 현재 시점에 센서를 통해 입력되는 영상 프레임을 디스플레이한다. 즉, 상기 전자기기는 센서를 통해 현재 입력되는 영상 프레임을 디스플레이하고, 상기 알파 블랜딩이 적용된 마지막 영상 프레임을 OSD 채널에 오버레이 시킴으로써, 사용자가 상기 녹화된 마지막 영상 프레임과 센서를 통해 현재 입력되는 영상 프레임을 동시에 볼 수 있도록 한다. 그러면, 사용자는 상기 전자기기 혹은 센서의 위치, 방향, 각도 등을 직접적으로 조절하여 상기 마지막 영상 프레임과 상기 현재 입력되는 영상을 일치시킬 수 있게 된다.
이후, 상기 사용자는 상기 영상 프레임을 일치시킴으로써 녹화 재시작을 요청하며, 상기 전자기기는 (f)와 같이 상기 사용자의 요청에 따라 녹화를 재시작한다.
도 3은 본 발명에 따른 전자기기의 블록 구성을 도시하고 있다.
상기 도 3에 도시된 바와 같이, 상기 전자기기는 제어부(301), 카메라부(305), 영상 처리부(307), 저장부(309), 표시부(311), 입력부(313)를 포함하며, 상기 제어부(301)는 움직임 벡터 계산부(303)를 포함하고, 상기 카메라부(305)는 카메라 센서(315)를 포함하여 구성된다.
상기 제어부(301)는 상기 전자기의 전반적인 동작, 예를 들어, 캠코더를 이용한 녹화 기능 등을 처리 및 제어하며, 본 발명에 따라 녹화가 일시 정지되었다가 다시 시작될 시, 녹화된 마지막 영상 프레임과 다시 시작되는 영상 프레임 간에 발생되는 차이를 제거하기 위한 기능들을 처리 및 제어한다.
특히, 상기 제어부(301)는 본 발명에 따라 상기 움직임 벡터 계산부(303)를 포함함으로써, 상기 녹화된 마지막 영상 프레임과 상기 카메라 선세(315)를 통해 입력되는 현재 시점의 영상 프레임 간의 움직임 벡터를 계산한 후, 기 설정된 임계값과 비교하여 두 영상 프레임이 일치하는지 여부를 판단한다. 상기 임계값은 시스템마다 다른 값을 가질 수 있으며, 사용자에 의해 변경 설정될 수 있다.
상기 움직임 벡터 계산부(303)는 상기 두 영상 프레임 간의 움직임 벡터를 기 설정된 임계값과 계속해서 비교하여 상기 움직임 벡터가 기 설정된 임계값보다 작을 시에 상기 두 영상 프레임이 일치함을 판단한다. 즉, 상기 움직임 벡터 계산부(303)는 상기 두 영상 프레임 간의 X축 움직임 벡터의 합과 Y축 움직임 벡터의 합을 구하며, 이 값이 기 설정된 임계값에 근접할 때까지 계속해서 비교 동작을 수행한다. 여기서, 상기 움직임 벡터의 합이 (0,0)이 되면 두 영상 프레임이 완벽하게 일치하는 영상이 되지만, 실제적으로 상기 움직임 벡터의 합이 (0,0)이 되는 것은 불가능하므로, 상기 임계값은 (0,0)에 근접한 값으로 설정한다. 또한, 여기서 상기 제어부(301)는 상기 움직임 벡터 계산부(303)에서 두 영상 프레임이 일치함이 판단될 때까지 상기 전자기기 혹은 상기 카메라 센서(315)의 위치, 각도 및 방향을 조절함으로써, 상기 카메라 센서(315)를 통해 입력되는 영상 프레임과 상기 마지막 영상 프레임이 유사해지도록 유도한다.
즉, 상기 제어부(301)는 사용자의 요청에 따라 녹화가 일시 정지될 시, 녹화된 마지막 영상 프레임을 추출하여 상기 저장부(309)에 별도로 저장하고, 사용자에 의해 녹화 재시작이 요청될 시, 상기 마지막 영상 프레임을 상기 움직임 벡터 계산부(303)로 제공하며, 카메라 센서(315)를 통해 입력되는 현재 시점의 영상 프레임을 상기 영상처리부(307)를 통해 입력받아 상기 움직임 벡터 계산부(303)로 제공한다. 이후, 상기 움직임 벡터 계산부(303)에서 두 영상 프레임의 일치가 판단될 시, 상기 녹화 재시작을 수행한다.
또한, 상기 제어부(301)는 본 발명에 따라 상기 추출된 마지막 영상 프레임에 알파 블랜딩을 적용하고, 상기 알파 블랜딩이 적용된 마지막 영상 프레임을 상기 표시부(311)의 OSD 채널에 오버레이시키기 위한 기능을 제어 및 처리한다. 여기서, 상기 제어부(301)는 YUV 형식의 마지막 영상 프레임을 RGB565 형식으로 변환 한 후, 상기 알파 블랜딩을 적용하여 ARGB4444 형식으로 변환한다.
상기 카메라부(305)는 영상 촬영시에 감지되는 광신호를 전기적 신호로 변환하는 카메라 센서(315)와, 상기 카메라 센서로부터 촬영되는 아날로그 영상신호를 디지털 데이터로 변환하는 신호처리부(미도시)를 구비하며, 상기 디지털 데이터로 변환된 영상신호를 상기 영상처리부(307)로 출력한다. 여기서, 상기 카메라 센서는 CCD(Charge Coupled Device) 센서로, 상기 신호처리부는 DSP(Digital Signal Processor)로 구현할 수 있다.
상기 영상 처리부(307)는 영상 코덱(CODEC : Coder-Decoder)이라고 칭하기도 한다. 상기 영상 처리부(307)는 영상신호를 설정된 방식으로 코딩하거나, 코딩된 프레임 영상데이터를 원래의 프레임 영상데이터로 디코딩하는 역할을 수행한다.
상기 저장부(309)는 롬(ROM: Read Only Memory), 램(RAM: Random Access Memory), 플래쉬 롬(flash ROM)으로 구성되어 상기 제어부(301)의 처리 및 제어를 위한 프로그램의 마이크로코드와 각종 참조 데이터를 저장하며, 각종 프로그램 수행중에 발생하는 일시적인 데이터 및 갱신 가능한 각종 보관용 데이터들을 저장한다. 특히, 본 발명에 따라 상기 저장부(309)는 코딩된 영상 프레임 데이터를 저장하고, 상기 제어부(301)의 제어에 따라 녹화 일시 정지시에 마지막으로 저장된 영상 프레임을 별도로 저장한다.
상기 표시부(311)는 상기 전자기기의 동작 중에 발생되는 상태 정보 및 숫자와 문자들을 디스플레이한다. 특히, 본 발명에 따라 상기 제어부(305)의 제어하에 상기 카메라 센서(315)를 통해 현재 입력되는 영상 프레임을 디스플레이하고, 알파 블랜딩된 영상을 OSD 채널에 오버레이 시킴으로써, 사용자가 상기 녹화된 마지막 영상 프레임과 센서를 통해 현재 입력되는 영상 프레임을 동시에 볼 수 있도록 한다.
상기 입력부(313)는 다수의 기능키들을 구비하여 사용자가 누르는 키에 대응하는 데이터를 상기 제어부(301)로 제공한다. 특히, 상기 입력부(313)는 사용자에 의해 녹화 일시 정지 및 재시작 요청을 입력받아 상기 제어부(301)로 제공한다.
도 4a와 4b는 본 발명의 실시 예에 따른 전자기기에서 녹화를 일시 정지하였다가 재시작하는 동작 절차를 도시하고 있다.
상기 도 4a와 4b를 참조하면, 상기 전자기기는 401단계에서 녹화가 시작되면, 403단계로 진행하여 카메라 센서(315)로부터 입력되는 영상 프레임을 표시부(311)에 디스플레이하면서 저장부(309)에 저장한다.
이후, 상기 전자기기는 405단계에서 녹화 일시 정지 이벤트가 발생되는지 검사한다. 상기 녹화 일시 정지 이벤트가 발생되지 않을 시, 상기 전자기기는 상기 403단계로 되돌아가 상기 카메라 센서(315)로부터 입력되는 영상 프레임을 저장 및 디스플레이하는 동작을 계속해서 수행한다.
반면, 상기 녹화 일시 정지 이벤트가 발생될 시, 상기 전자기기는 407단계에서 상기 카메라 센서(315)로부터 입력되는 영상 프레임의 저장을 중지하고, 상기 저장된 영상 프레임들 중 마지막에 저장된 영상 프레임을 추출한다.
이후, 상기 전자기기는 409단계에서 사용자에 의해 녹화 재시작 이벤트가 발생되면, 411단계에서 녹화 재시작 모드를 검사한다. 여기서, 상기 녹화 재시작 모드는 상기 전자기기가 직접 두 영상 프레임의 일치함을 판단하고 녹화를 자동적으로 재시작하는 자동 시작 모드와 사용자가 두 영상 프레임의 일치함을 판단하여 녹 화 재시작을 입력받는 수동 시작 모드로 구분할 수 있으며, 상기 자동 시작 모드와 수동 시작 모드는 사용자에 의해 설정 및 변경될 수 있다.
상기 녹화 재시작 모드가 자동 시작 모드로 설정된 경우, 상기 전자기기는 413단계에서 카메라 센서(315)를 통해 입력되는 영상 프레임을 상기 표시부(311)에 디스플레이하고, 415단계로 진행하여 현재 입력되는 영상 프레임과 상기 추출된 마지막 영상 프레임 간의 움직임 벡터를 산출한다.
이후, 상기 전자기기는 417단계에서 상기 산출된 움직임 벡터와 기 설정된 임계값의 크기를 비교한다. 만일, 상기 산출된 움직임 벡터가 기 설정된 임계값보다 크거나 같을 시 상기 전자기기는 두 영상 프레임이 일치하지 않다고 판단하고 상기 413단계로 되돌아가 이하 단계를 재수행한다. 이때, 상기 전자기기가 상기 카메라 센서(315)를 통해 입력되는 다음 영상 프레임과 상기 마지막 영상 프레임이 유사해지도록 상기 전자기기 자신 혹은 상기 센서의 위치, 각도 및 방향을 조절할 수도 있으며, 사용자가 상기 전자기기 혹은 센서의 위치, 각도 및 방향을 조절할 수도 있다.
반면, 상기 산출된 움직임 벡터가 기 설정된 임계값보다 작을 시 상기 전자기기는 두 영상 프레임이 일치함을 판단하고 419단계로 진행하여 녹화를 자동으로 재시작한다. 이때, 상기 전자기기는 사용자에게 상기 두 영상 프레임이 일치하여 녹화를 재시작함을 알릴 수 있다. 이후, 상기 전자기기는 본 발명에 따른 알고리즘을 종료한다.
한편, 상기 녹화 재시작 모드가 수동 시작 모드로 설정된 경우, 상기 전자기기는 421단계에서 상기 추출된 마지막 영상 프레임에 알파 블랜딩을 적용하여 상기 표시부(311)의 OSD 채널에 디스플레이하고, 상기 카메라 센서(315)를 통해 입력되는 영상 프레임을 상기 표시부(311)에 디스플레이한다. 즉, 상기 전자기기는 사용자가 상기 녹화된 마지막 영상 프레임과 상기 카메라 센서(315)를 통해 현재 입력되는 영상 프레임을 동시에 볼 수 있도록 상기 마지막 영상 프레임을 투명하게 디스플레이한다.
이후, 상기 전자기기는 423단계에서 상기 카메라 센서(315)를 통해 현재 입력되는 영상 프레임과 상기 추출된 마지막 영상 프레임 간의 움직임 벡터를 산출하고, 425단계로 진행하여 상기 산출된 움직임 벡터와 기 설정된 임계값의 크기를 비교한다.
상기 전자기기는 상기 산출된 움직임 벡터가 기 설정된 임계값보다 크거나 같을 시 하기 429단계로 진행하고 상기 산출된 움직임 벡터가 기 설정된 임계값보다 작을 시 427단계에서 상기 두 영상 프레임이 일치함을 사용자에게 알리고, 429단계로 진행하여 사용자에 의해 녹화 재시작이 요청되는지 확인한다. 여기서, 상기 움직임 벡터를 통해 두 영상 프레임의 일치를 알림으로써, 사용자가 상기 두 영상이 일치함을 명확하게 인지할 수 있다.
이후, 상기 전자기기는 상기 녹화 재시작이 요청되지 않으면 상기 421단계로 되돌아가 이하 단계를 재수행하고, 상기 녹화 재시작이 요청되면 431단계로 진행하여 녹화를 재시작한다. 물론, 여기서 상기 움직임 벡터를 통해 두 영상 프레임이 일치됨이 확인되면 사용자로부터 상기 녹화 재시작을 요청받지 않고 자동으로 재시작하는 것도 가능하다.
이후, 상기 전자기기는 본 발명에 따른 알고리즘을 종료한다.
한편 본 발명의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능하다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.
도 1은 본 발명의 실시 예에 따른 전자기기에서 움직임벡터를 이용하여 녹화를 재시작하는 예를 도시하는 도면,
도 2는 본 발명의 실시 예에 따른 전자기기에서 녹화된 마지막 영상 프레임을 이용하여 녹화를 재시작하는 예를 도시하는 도면,
도 3은 본 발명에 따른 전자기기의 블록 구성을 도시하는 도면, 및
도 4a와 4b는 본 발명의 실시 예에 따른 전자기기에서 녹화를 일시 정지하였다가 재시작하는 동작 절차를 도시하는 도면.

Claims (20)

  1. 전자기기에서 영상 녹화 방법에 있어서,
    녹화가 일시 중시되는 시점에 마지막으로 녹화되는 영상 프레임을 추출하는 과정과,
    녹화 재시작 이벤트가 발생될 시, 센서로부터 입력되는 영상 프레임과 상기 추출된 영상 프레임이 일치하는지 여부를 판단하는 과정과,
    두 영상 프레임이 일치할 경우 상기 녹화 재시작을 자동으로 수행하는 과정을 포함하는 것을 특징으로 하는 방법.
  2. 제 1항에 있어서,
    상기 입력되는 영상 프레임과 추출된 영상 프레임이 일치하는지 여부를 판단하는 과정은,
    상기 센서로부터 입력되는 영상 프레임과 상기 추출된 영상 프레임 간의 움직임 벡터(motion vector)를 계산하는 과정과,
    상기 움직임 벡터를 기 설정된 임계값과 비교하여 상기 두 영상 프레임이 일치하는지 여부를 판단하는 과정을 포함하는 것을 특징으로 하는 방법.
  3. 제 2항에 있어서,
    상기 움직임 벡터는, 상기 센서로부터 입력되는 영상 프레임과 상기 추출된 영상 프레임 간의 X 축 움직임 벡터 합과 Y축 움직임 벡터 합으로 구성된 것을 특징으로 하는 방법.
  4. 제 2항에 있어서,
    상기 두 영상 프레임이 일치하는지 여부를 판단하는 과정은,
    상기 움직임 벡터가 기 설정된 임계값보다 작을 경우 상기 두 영상 프레임이 일치함을 판단하며, 상기 움직임 벡터가 기 설정된 임계값보다 크거나 같을 경우 상기 두 영상 프레임이 일치하지 않음을 판단하고, 상기 입력되는 영상 프레임과 추출된 영상 프레임 간의 움직임 벡터를 계속해서 계산하는 과정을 포함하는 것을 특징으로 하는 방법.
  5. 제 2항에 있어서,
    상기 임계값은, 변경 설정 가능한 것을 특징으로 하는 방법.
  6. 전자기기에서 영상 녹화 방법에 있어서,
    녹화가 일시 중시되는 시점에 마지막으로 녹화되는 영상 프레임을 추출하는 과정과,
    상기 추출된 영상 프레임에 알파 블랜딩(alpha blending)을 적용하는 과정과,
    센서로부터 입력되는 영상 프레임과 상기 알파 블랜딩이 적용된 영상 프레임을 디스플레이하는 과정과,
    녹화 재시작이 요청될 시, 녹화를 재시작하는 과정을 포함하는 것을 특징으로 하는 방법.
  7. 제 6항에 있어서,
    상기 알파 블랜딩을 적용하는 과정은,
    상기 추출된 YUV 형식의 영상 프레임을 RGB565 형식의 영상 프레임으로 변환하는 과정과,
    상기 RGB565형식으로 변환된 영상 프레임을 알파 블랜딩하여 ARGB4444 형식의 영상 프레임으로 변환하는 과정을 포함하는 것을 특징으로 하는 방법.
  8. 제 6항에 있어서,
    상기 알파 블랜딩이 적용된 영상 프레임은, OSD(On Screen Display) 채널에 디스플레이하는 것을 특징으로 하는 방법.
  9. 제 6항에 있어서,
    상기 센서로부터 입력되는 영상 프레임과 상기 추출된 영상 프레임 간의 움직임 벡터(motion vector)를 계산하여 기 설정된 임계값을 비교하는 과정과,
    상기 움직임 벡터가 기 설정된 임계값보다 작을 시, 상기 센서로부터 입력되는 영상 프레임과 상기 추출된 영상 프레임이 일치함을 알리는 과정을 더 포함하는 것을 특징으로 하는 방법.
  10. 제 9항에 있어서,
    상기 임계값은, 변경 설정 가능한 것을 특징으로 하는 방법.
  11. 전자기기에서 영상 녹화 장치에 있어서,
    영상을 입력받는 카메라 센서와,
    녹화가 일시 중시되는 시점에 마지막으로 녹화되는 영상 프레임을 추출하고, 녹화 재시작 이벤트가 발생될 시, 상기 카메라 센서를 통해 입력되는 영상 프레임과 상기 추출된 영상 프레임의 일치여부를 판단하여 상기 녹화 재시작 여부를 판단하는 제어부를 포함하는 것을 특징으로 하는 장치.
  12. 제 11항에 있어서,
    상기 제어부는, 상기 카메라 센서로부터 입력되는 영상 프레임과 상기 추출된 영상 프레임 간의 움직임 벡터(motion vector)를 계산하고, 계산된 움직임 벡터를 기 설정된 임계값과 비교하여 상기 카메라 센서로부터 입력되는 영상 프레임과 상기 추출된 영상 프레임이 일치하는지 여부를 판단하는 것을 특징으로 하는 장치.
  13. 제 12항에 있어서,
    상기 움직임 벡터는, 상기 카메라 센서로부터 입력되는 영상 프레임과 상기 추출된 영상 프레임 간의 X 축 움직임 벡터 합과 Y축 움직임 벡터 합으로 구성된 것을 특징으로 하는 장치.
  14. 제 12항에 있어서,
    상기 제어부는, 상기 움직임 벡터가 기 설정된 임계값보다 작을 경우 상기 카메라 센서로부터 입력되는 영상 프레임과 상기 추출된 영상 프레임이 일치함을 판단하며, 상기 움직임 벡터가 기 설정된 임계값보다 크거나 같을 경우 상기 카메라 센서로부터 입력되는 영상 프레임과 상기 추출된 영상 프레임이 일치하지 않음을 판단하고, 상기 입력되는 영상 프레임과 추출된 영상 프레임 간의 움직임 벡터를 계속해서 계산하는 것을 특징으로 하는 장치.
  15. 제 12항에 있어서,
    상기 임계값은, 변경 설정 가능한 것을 특징으로 하는 장치.
  16. 전자기기에서 영상 녹화 장치에 있어서,
    영상을 입력받는 카메라 센서와,
    녹화가 일시 중시되는 시점에 마지막으로 녹화되는 영상 프레임을 추출하고,상기 추출된 영상 프레임에 알파 블랜딩(alpha blending)을 적용하는 제어부와,
    상기 카메라 센서를 통해 입력되는 영상 프레임과 상기 알파 블랜딩이 적용된 영상 프레임을 디스플레이하는 표시부를 포함하는 것을 특징으로 하는 장치.
  17. 제 16항에 있어서,
    상기 제어부는, 상기 추출된 YUV 형식의 영상 프레임을 RGB565 형식의 영상 프레임으로 변환한 후, 알파 블랜딩하여 ARGB4444 형식의 영상 프레임으로 변환하는 것을 특징으로 하는 장치.
  18. 제 16항에 있어서,
    상기 표시부는, 상기 알파 블랜딩이 적용된 영상 프레임을 OSD(On Screen Display) 채널에 디스플레이하는 것을 특징으로 하는 장치.
  19. 제 16항에 있어서,
    상기 제어부는, 상기 카메라 센서로부터 입력되는 영상 프레임과 상기 추출된 영상 프레임 간의 움직임 벡터(motion vector)를 계산하여 기 설정된 임계값을 비교하고, 상기 움직임 벡터가 기 설정된 임계값보다 작을 시, 상기 카메라 센서로부터 입력되는 영상 프레임과 상기 추출된 영상 프레임이 일치함을 알리기 위한 기능을 제어하는 것을 특징으로 하는 장치.
  20. 제 19항에 있어서,
    상기 임계값은, 변경 설정 가능한 것을 특징으로 하는 장치.
KR1020080046939A 2008-05-21 2008-05-21 전자기기에서 영상 녹화 방법 및 장치 KR101041178B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020080046939A KR101041178B1 (ko) 2008-05-21 2008-05-21 전자기기에서 영상 녹화 방법 및 장치
US12/437,098 US20090290846A1 (en) 2008-05-21 2009-05-07 Method and apparatus for recording image in electronic apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080046939A KR101041178B1 (ko) 2008-05-21 2008-05-21 전자기기에서 영상 녹화 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20090120896A KR20090120896A (ko) 2009-11-25
KR101041178B1 true KR101041178B1 (ko) 2011-06-13

Family

ID=41342190

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080046939A KR101041178B1 (ko) 2008-05-21 2008-05-21 전자기기에서 영상 녹화 방법 및 장치

Country Status (2)

Country Link
US (1) US20090290846A1 (ko)
KR (1) KR101041178B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9516230B2 (en) * 2013-05-20 2016-12-06 Acp Japan Co., Ltd. Medical image recording/playback device

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09261528A (ja) * 1996-03-25 1997-10-03 Sanyo Electric Co Ltd カメラ一体型記録装置
JPH11110917A (ja) 1997-10-01 1999-04-23 Matsushita Electric Ind Co Ltd 記録装置及び記録方法
KR100854932B1 (ko) 2007-08-06 2008-08-29 (주)씨앤에스 테크놀로지 영상 변환 기능을 가지는 영상 합성 장치
KR20090008732A (ko) * 2007-07-18 2009-01-22 삼성전자주식회사 디지털 영상 기기의 영상 합성 장치 및 이를 이용한 영상합성 방법

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000357234A (ja) * 1999-06-16 2000-12-26 Canon Inc 画像処理装置およびその方法
KR100644498B1 (ko) * 1999-08-25 2006-11-10 마츠시타 덴끼 산교 가부시키가이샤 노이즈 검출방법과 노이즈 검출장치 및 화상 복호화장치
JP3677192B2 (ja) * 2000-04-19 2005-07-27 シャープ株式会社 画像処理装置
US6965645B2 (en) * 2001-09-25 2005-11-15 Microsoft Corporation Content-based characterization of video frame sequences
US7463311B2 (en) * 2002-09-09 2008-12-09 General Instrument Corporation Method and system for including non-graphic data in an analog video output signal of a set-top box
US7324736B2 (en) * 2002-10-09 2008-01-29 Lsi Logic Corporation Intelligent recording control system
CN1543096A (zh) * 2003-04-30 2004-11-03 ���µ�����ҵ��ʽ���� 自动检测电视广告的装置及其方法
KR100545855B1 (ko) * 2003-09-22 2006-01-24 삼성전자주식회사 데이터 디스플레이를 위한 구동 회로 및 이를 이용한데이터 디스플레이를 위한 구동 방법
US7394974B2 (en) * 2004-01-26 2008-07-01 Sony Corporation System and method for associating presented digital content within recorded digital stream and method for its playback from precise location
JP4774204B2 (ja) * 2004-10-12 2011-09-14 株式会社日立製作所 再生装置
JP2007013694A (ja) * 2005-06-30 2007-01-18 Sony Corp 双方向コミュニケーション装置及び接続方法
JP5348889B2 (ja) * 2005-10-06 2013-11-20 株式会社日立メディコ 穿刺治療支援装置
US8824801B2 (en) * 2008-05-16 2014-09-02 Microsoft Corporation Video processing

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09261528A (ja) * 1996-03-25 1997-10-03 Sanyo Electric Co Ltd カメラ一体型記録装置
JPH11110917A (ja) 1997-10-01 1999-04-23 Matsushita Electric Ind Co Ltd 記録装置及び記録方法
KR20090008732A (ko) * 2007-07-18 2009-01-22 삼성전자주식회사 디지털 영상 기기의 영상 합성 장치 및 이를 이용한 영상합성 방법
KR100854932B1 (ko) 2007-08-06 2008-08-29 (주)씨앤에스 테크놀로지 영상 변환 기능을 가지는 영상 합성 장치

Also Published As

Publication number Publication date
US20090290846A1 (en) 2009-11-26
KR20090120896A (ko) 2009-11-25

Similar Documents

Publication Publication Date Title
US11223757B2 (en) Video recording device and camera function control program
US8089527B2 (en) Image capturing apparatus, image capturing method and storage medium
TWI362886B (en) Image storage device, imaging device, image storage method, and image processing program
US8284256B2 (en) Imaging apparatus and computer readable recording medium
JP4506801B2 (ja) 画像認識装置、画像認識方法、画像認識プログラム
US20090268074A1 (en) Imaging apparatus and imaging method
KR101455018B1 (ko) 촬상 장치, 촬상 방법, 및 컴퓨터 판독 가능한 기록 매체
JP5210843B2 (ja) 撮像装置
US9143682B2 (en) Image capturing apparatus, method, and recording medium capable of continuously capturing object
JP5434038B2 (ja) 撮像装置
KR101166504B1 (ko) 휴대용 단말기에서 이미지 캡처 장치 및 방법
US9270881B2 (en) Image processing device, image processing method and recording medium capable of generating a wide-range image
JP5317710B2 (ja) 画像処理装置、その制御方法、プログラム及び記録媒体
US9813639B2 (en) Image processing device and control method for the same for applying a predetermined effect to a moving image
US20140285649A1 (en) Image acquisition apparatus that stops acquisition of images
US20100067880A1 (en) Moving-image reproducing apparatus and moving-image reproducing method
KR101041178B1 (ko) 전자기기에서 영상 녹화 방법 및 장치
KR20130127221A (ko) 카메라를 구비하는 휴대단말기의 동영상 촬영장치 및 방법
KR20070117104A (ko) 휴대용 단말기에서 이미지 합성 장치 및 방법
JP6234147B2 (ja) 画像記録装置及び画像記録方法
JP2010068291A (ja) 撮像装置及びプログラム
KR20100128392A (ko) 영상 디스플레이 방법, 영상 매칭 방법 및 이를 이용한 디스플레이 장치
JP2016039394A (ja) 撮像装置、撮像装置の制御方法およびコンピュータプログラム
KR20100070058A (ko) 디지털 영상 처리 장치 및 방법
KR20140037663A (ko) 촬영 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140529

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150528

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160530

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20170529

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20180530

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20190530

Year of fee payment: 9