KR20130102368A - 동영상 특징 정보를 가이드하기 위한 동영상 편집 장치 및 방법 - Google Patents

동영상 특징 정보를 가이드하기 위한 동영상 편집 장치 및 방법 Download PDF

Info

Publication number
KR20130102368A
KR20130102368A KR1020120023555A KR20120023555A KR20130102368A KR 20130102368 A KR20130102368 A KR 20130102368A KR 1020120023555 A KR1020120023555 A KR 1020120023555A KR 20120023555 A KR20120023555 A KR 20120023555A KR 20130102368 A KR20130102368 A KR 20130102368A
Authority
KR
South Korea
Prior art keywords
video
feature information
information
displaying
editing
Prior art date
Application number
KR1020120023555A
Other languages
English (en)
Inventor
김창한
조성대
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020120023555A priority Critical patent/KR20130102368A/ko
Priority to EP13158053.2A priority patent/EP2637172A1/en
Priority to US13/787,068 priority patent/US20130236162A1/en
Priority to CN2013100721585A priority patent/CN103312943A/zh
Publication of KR20130102368A publication Critical patent/KR20130102368A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/87—Regeneration of colour television signals
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

본 발명은 동영상 특징 정보를 가이드하는 동영상 편집 장치 및 방법에 관한 것이다.
이를 위해 본 발명은 본 발명은 동영상 편집 시 동영상 컨텐츠를 분석하여 적어도 하나의 동영상 특징 정보를 검출한 후 적어도 하나의 동영상 특징 정보가 검출된 동영상 컨텐츠 구간을 편집 화면에 함께 표시함으로써 사용자에게 동영상 편집을 위한 가이드를 해줄 수 있게 된다.

Description

동영상 특징 정보를 가이드하기 위한 동영상 편집 장치 및 방법{VIDEO EDITING APPARATUS AND METHOD FOR GUIDING VIDEO FEATURE INFORMATION}
본 발명은 동영상 편집 장치 및 방법에 관한 것으로, 특히 동영상으로부터 적어도 하나의 동영상 특징 정보를 추출하고, 추출된 적어도 하나의 동영상 특징 정보를 가이드하기 위한 동영상 편집 장치 및 방법에 관한 것이다.
일반적으로 동영상 편집을 위해서 동영상 편집 기능을 수행할 시 동영상 편집 화면은 편집을 위해서 선택된 동영상 컨텐츠를 분석하기 위해 전체 재생시간 동안 동영상 데이터를 재생시키고, 재생된 동영상 데이터를 표시하거나 일정주기 시간별로 샘플링된 썸네일을 표시한다.
구체적으로, 동영상 편집 화면은 동영상 데이터를 미리보기할 수 있는 미리보기 화면 영역과, 동영상 데이터를 시간 정보에 따라 비디오 및 오디오 클립을 순서대로 배치하여 표시하는 타임라인 영역과, 동영상 편집을 위한 적어도 하나의 편집 기능을 표시하는 편집 기능 영역을 포함한다.
사용자가 편집을 원하는 동영상 데이터를 선택하면 동영상 편집 화면 내 타임라인 영역에 선택된 동영상 데이터를 표시하고, 사용자의 입력에 따라 여러가지 편집 기술로 동영상을 편집하게 된다.
상기와 같이 종래에는 편집 화면 내 타임라인에 사용자에 의해서 선택된 동영상 데이터를 표시하고, 사용자가 특정 시간 정보에 대응하는 동영상 프레임을 미리보기 영역에서 확인하여 여러가지 편집 기술을 이용하여 동영상 편집을 수행하였다.
하지만, 종래에는 사용자가 동영상 데이터 편집을 위한 동영상 데이터를 분석하기 위해 전체 동영상 데이터를 재생시켜 오랜 시간 동안 동영상을 시청해야 하는 불편함이 있다.
또한, 종래에는 사용자가 동영상 데이터를 모두 시청하더라도 동영상 데이터의 어떤 시간 정보에 해당하는 동영상 프레임이 어떤 정보가 포함되어 있는지를 기억하기 어렵다는 문제점이 있다.
뿐만 아니라, 종래에는 사용자가 표시된 썸네일 데이터를 인지하더라도 썸내일 데이터가 동영상 데이터의 모든 정보를 포함하고 있지 않기 대문에 사용자가 편집을 원하는 장면을 찾아내거나 특정 음성이 포함된 장면을 찾아내는데 오랜 시간이 걸린다는 번거로움이 있다.
따라서, 본 발명은 동영상 편집 시 사용자가 관심을 가지는 동영상 특징 정보가 포함된 동영상 구간을 가이드하기 위한 동영상 편집 장치 및 방법을 제공한다.
상술한 바를 달성하기 위한 본 발명은 동영상 특징 정보를 가이드하는 동영상 편집 장치에 있어서, 동영상 데이터에서 적어도 하나의 동영상 특징 정보를 포함하는 동영상 구간들을 판단하는 특징 정보 판단부와, 상기 판단된 동영상 구간들에 대응하는 시간 정보를 검출하는 시간 정보 검출부와, 상기 동영상 데이터를 표시하는 표시부와, 동영상 편집 요청에 따라 동영상 특징 정보를 포함하는 동영상 구간들을 판단하도록 상기 특징 정보 판단부를 제어하고, 각 판단된 동영상 구간에 대응하는 시간 정보를 검출하도록 상기 시간 정보 검출부를 제어하며, 상기 검출된 시간 정보를 이용하여 상기 판단된 동영상 구간들에 대한 정보를 상기 표시부에 표시하는 제어부를 포함하는 것을 특징으로 한다.
또한, 본 발명은 동영상 편집 장치에서 동영상 특징 정보를 가이드하는 동영상 편집 방법에 있어서, 동영상 편집 요청에 따라 동영상 데이터에서 적어도 하나의 동영상 특징 정보를 포함하는 동영상 구간들을 판단하는 과정과, 상기 판단된 동영상 구간들에 대응하는 시간 정보를 검출하는 과정과, 상기 동영상 데이터를 표시하는 과정과, 상기 검출된 시간 정보를 이용하여 상기 판단된 동영상 구간들에 대한 정보를 표시하는 과정을 포함하는 것을 특징으로 한다.
본 발명은 동영상 데이터를 분석하여 적어도 하나의 동영상 특징이 포함된 동영상 구간을 가이드함으로써 사용자가 손쉽게 원하는 동영상 부분을 재생할 수 있고, 가이드된 부분을 영상 편집에도 활용할 수 있다는 이점이 있다.
또한, 본 발명은 사용자가 동영상 편집을 통해서 자신이 원하는 동영상 특징 정보가 포함된 동영상 구간에 대한 메모 또는 요약 기능을 제공하여 사용자가 동영상 데이터 내 의미있는 부분을 손쉽게 찾아볼 수 있다는 이점이 있다.
도 1은 본 발명의 실시 예에 따라 동영상 편집 장치의 구성도,
도 2는 본 발명의 실시 예에 따라 특징 정보 판단부에 대한 구성도,
도 3은 본 발명의 실시 예에 따라 동영상 편집 장치에서 특징 정보가 검출된 동영상 구간을 가이드하기 위한 과정을 나타내는 흐름도,
도 4는 본 발명의 실시 예에 따른 동영상 편집 화면을 설명하기 위한 예시도.
이하 본 발명의 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 하기 설명 및 첨부 도면에서 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다.
본 발명은 동영상 편집 시 동영상 컨텐츠를 분석하여 적어도 하나의 동영상 특징 정보를 검출한 후 적어도 하나의 동영상 특징 정보가 검출된 동영상 컨텐츠 구간에 대한 정보를 편집 화면에 함께 표시함으로써 사용자에게 동영상 편집을 위한 가이드를 해줄 수 있게 된다.
도 1은 본 발명의 실시 예에 따라 동영상 편집 장치의 구성도를 나타낸다.
도 1의 동영상 편집 장치는 제어부(10), 입력부(20), 특징 정보 판단부(30), 시간 정보 검출부(40), 저장부(50), 표시부(60)를 포함한다.
먼저, 제어부(10)는 전반적으로 동영상 편집 장치의 동작을 제어하는데, 특히 사용자로부터 동영상 편집 기능을 수행하기 위한 요청이 있으면 동영상 편집 기능을 수행하기 위한 편집 화면을 디스플레이한다. 여기서, 편집 화면은 동영상 편집을 위해 사용되는 적어도 하나의 편집 기능을 포함하도록 구성된 화면을 의미한다.
제어부(10)는 사용자로부터 편집을 위한 동영상 선택이 있으면 선택된 동영상 데이터의 각 동영상 프레임을 분석하여 특징 정보 판단부(30)를 통해서 적어도 하나의 동영상 특징 정보가 검출되는 적어도 하나의 동영상 프레임을 포함하는 동영상 구간을 판단한다. 여기서, 동영상 특징 정보는 동영상 프레임 내에서 검출 가능한 얼굴, 표정, 음성, 장면 전환과 같은 특징 정보를 포함한다. 구체적으로, 제어부(10)는 특징 정보 판단부(30)를 통해서 각 영상 프레임 내에서 얼굴, 표정, 음성, 장면 전환과 같은 동영상 특징 정보가 검출되는 동영상 프레임을 판단한다. 예를 들어, 제어부(10)는 특징 정보 판단부(30)를 통해서 얼굴이 포함된 영상 프레임, 웃음, 울음, 찡그림, 눈감음과 같은 표정이 포함된 영상 프레임, 사람 음성이 포함된 영상 프레임, 장면 전환이 포함된 영상 프레임을 판단할 수 있다.
제어부(10)는 시간정보 검출부(40)를 통해서 동영상 특징 정보가 검출된 적어도 하나의 동영상 프레임을 포함하는 동영상 구간에 대한 시간 정보를 검출한다. 예를 들어, 제어부(10)는 시간정보 검출부(40)를 통해서 얼굴 검출이 시작된 영상 프레임의 시간 정보와 마지막으로 얼굴이 검출된 영상 프레임의 시간 정보를 검출한다. 본 발명의 실시 예에서는 시간정보 검출부(40)를 통해서 동영상 구간에 대한 시간 정보를 검출하는 것으로 설명하였으나, 다른 실시 예로 동영상 데이터를 구성하는 동영상 프레임에 순서대로 부여된 번호를 검출할 수도 있다.
제어부(10)는 각 동영상 특징 정보별로 동영상 편집 화면 내 타임 라인에 표시하고, 검출된 시간 정보를 이용하여 동영상 특징 정보가 검출된 구간이 구분되도록 표시한다. 이때, 타임 라인은 비디오 클립이나 오디오 클립을 순서대로 배치하는 편집 공간으로, 레이어와 프레임으로 구성되며, 레이어의 결합을 통해 화면의 이미지나 오디오를 배치할 수 있다. 이러한 타임 라인은 객체의 위치, 크기, 영상 속성 등을 조절하여 프레임을 연속적으로 보여 줄 수 있으며, 관련 구성 요소들끼리 서로 다른 레이어상에 등록하고 작업하면 구성 요소의 편집, 관리를 할 수 있다.
예를 들어, 제어부(10)는 동영상 타임라인 내 얼굴이 검출된 동영상 구간에 대한 정보를 특정 색상으로 표시하여 사용자에게 동영상 내에서 얼굴이 검출된 구간이 어느 구간인지를 가이드해줄 수 있다. 여기서, 동영상 구간에 대한 정보는 해당 동영상 구간에 대한 위치 정보, 시간 정보, 프레임 순번 중 적어도 하나를 포함한다.
입력부(20)는 적어도 하나의 입력에 대응하는 입력 데이터를 제어부(10)로 전달한다. 예를 들어, 입력부(20)는 동영상 선택을 위한 입력이 있으면 동영상 선택에 대응하는 입력 데이터를 제어부(10)로 전달한다.
특징 정보 판단부(30)는 동영상 데이터 내 각 동영상 프레임으로부터 적어도 하나의 동영상 특징 정보가 검출되는 동영상 프레임을 포함하는 동영상 구간을 판단하는데, 이에 대해서 구체적으로 도 2를 참조하여 설명하도록 한다.
도 2는 본 발명의 실시 예에 따라 특징 정보 판단부에 대한 구성도를 나타내는 도면이다.
본 발명의 특징 정보 판단부(30)는 얼굴 판단부(31), 표정 판단부(32), 음성 판단부(33), 장면 판단부(34)를 포함한다.
얼굴 판단부(31)는 동영상의 각 동영상 프레임에서 얼굴이 검출되는 동영상 프레임을 판단한다. 구체적으로, 얼굴 판단부(31)는 각 동영상 프레임 내 얼굴의 위치를 검색하고, 검색된 얼굴 위치를 얼굴 영역으로 감지하여 해당 얼굴 영역이 검출되는 적어도 하나의 동영상 프레임을 판단한다. 여기서, 얼굴 판단부(31)는 일반적인 얼굴 검출 방법을 이용하여 얼굴 검출 동작을 수행하는데, 윤곽선, 피부 색상, 질감, 템플리트 등을 이용한 얼굴 추출 기술이 이용될 수 있다. 예를 들어, 얼굴 판단부(31)는 다수의 얼굴 이미지를 스캔하면서 얼굴 학습을 수행하고, 수행된 얼굴 학습을 통해서 입력된 영상으로부터 얼굴을 검출함으로써 얼굴이 검출되는 동영상 프레임을 판단할 수 있다.
표정 판단부(32)는 동영상의 각 동영상 프레임에서 표정이 검출되는 동영상 프레임을 판단하는데, 웃는 모습, 우는 모습, 찡그린 모습, 화난 모습 등과 같은 다양한 표정이 검출되거나 미리 설정된 표정이 검출되는 동영상 프레임을 판단한다. 특히, 표정 판단부(32)는 적어도 하나의 타입의 표정을 데이터베이스화하고, 데이터베이스화된 표정들에 대한 학습을 수행하여 표정을 인식한 후 인식된 표정이 검출되는 동영상 프레임을 판단할 수 있다.
음성 판단부(33)는 동영상의 오디오 데이터 상에서 음성의 존재 여부를 식별하여 음성이 존재하는 오디오 데이터를 검출한 후 검출된 오디오 데이터에 대응하는 동영상 프레임을 판단한다. 예를 들어, 사람의 음성인 경우 음성 판단부(33)는 오디오 데이터 상에서 사람의 음성이 존재하는 구간을 검출하고, 검출된 음성 구간에 대응하는 동영상 프레임을 판단한다.
장면 판단부(34)는 동영상 내 각 동영상 프레임에서 장면이 전환되는 동영상 프레임을 판단한다. 구체적으로, 장면 판단부(34)는 각 동영상 프레임을 구성하는 픽셀들에 대한 픽셀값을 추출하여 평균 편차를 산출한 후 산출된 평균 편차가 미리 설정된 임계값보다 작은 동영상 프레임을 장면에 전환되는 동영상 프레임으로 판단한다. 또한 장면 판단부(34)는 각 동영상 프레임에 대한 색상 히스토그램을 분석하여 분석된 색상 히스토그램의 차이가 큰 동영상 프레임을 장면에 전환되는 동영상 프레임으로 판단할 수 있다.
이에 따라 특정 정보 판단부(30)은 상기와 같이 판단된 적어도 하나의 동영상 프레임을 각 동영상 특징 정보가 검출된 동영상 구간으로 판단한다.
시간 정보 검출부(40)는 상기의 특징 정보 판단부(30)를 통해서 판단된 적어도 하나의 동영상 프레임에 대응하는 시간 정보를 검출한다. 구체적으로, 시간 정보 검출부(40)는 동영상 데이터의 각 동영상 프레임들 중 특징 정보의 검출이 시작하는 동영상 시작 프레임과 특징 정보의 검출이 종료되는 동영상 종료 프레임 간의 특징 정보 검출 구간에 해당하는 시간 정보를 검출한다. 예를 들어, 시간 정보는 동영상 시작 프레임의 시간과 동영상 종료 프레임의 시간에 대한 정보를 포함한다.
저장부(50)는 동영상 편집 장치에서 사용되는 데이터를 저장하는데, 특히 적어도 하나의 동영상 데이터를 저장하고, 동영상 데이터 내 특징 정보가 검출되는 동영상 구간에 대한 정보를 저장한다. 이때, 동영상 구간에 대한 정보는 동영상 구간에 대한 위치 정보, 시간 정보, 프레임 순번 중 적어도 하나를 포함한다. 또한, 저장부(50)는 특징 정보가 검출되는 동영상 프레임에 대응하는 시간 정보를 저장한다.
표시부(60)는 동영상 편집을 위해 구성된 화면을 디스플레이하고, 동영상 편집 화면 내 선택된 동영상 데이터를 타임 라인 내에 표시하고, 특징 정보가 검출된 적어도 하나의 동영상 프레임에 대응하는 시간 정보를 이용하여 타임 라인 내에 특징 정보가 검출된 동영상 구간에 대한 정보가 구분되도록 표시한다. 이때, 표시부(60)는 타임 라인 내에 각 동영상 특징 정보별로 특징 정보가 검출된 동영상 구간에 대한 정보를 서로 다른 색상으로 표시할 수 있다.
이와 같이 본 발명은 동영상 편집 시 사용자가 관심을 가지는 동영상 특징 정보가 포함된 동영상 구간에 대한 정보를 특정 색상으로 표시함으로써 사용자가 보다 편리하게 동영상을 편집할 수 있도록 한다.
도 3은 본 발명의 실시 예에 따라 동영상 편집 장치에서 특징 정보가 검출된 동영상 구간을 가이드하기 위한 과정을 나타내는 흐름도이다.
300단계에서 제어부(10)는 동영상 편집 기능을 시작하기 위한 요청에 따라 동영상 편집 기능을 시작한다.
301단계에서 제어부(10)는 사용자로부터 편집을 위한 동영상 선택을 입력받는다. 예를 들어, 제어부(10)는 동영상 편집 기능이 시작되면 편집 가능한 적어도 하나의 동영상에 대한 목록을 표시부(60)에 디스플레이하고, 사용자로부터 특정 동영상에 대한 선택이 입력되면 선택된 특정 동영상을 편집 화면 내 타임 라인에 표시하기 위한 동작을 수행할 수 있다.
302단계에서 제어부(10)는 선택된 동영상 데이터의 각 동영상 프레임을 분석하여 적어도 하나의 동영상 특징 정보가 검출되는 동영상 프레임을 판단하도록 특징 정보 판단부(30)를 제어한다. 구체적으로, 제어부(10)는 특징 정보 판단부(30)가 동영상 데이터를 구성하는 적어도 하나의 동영상 프레임을 분석하여 얼굴, 표정, 음성, 장면 전환과 같은 특정 정보가 포함된 동영상 프레임이 어떤 프레임인지를 판단하도록 제어한다. 예를 들어, 특징 정보 판단부(30)는 각 동영상 프레임 중 얼굴이 검출되는 동영상 프레임을 판단하거나 표정이 검출되는 동영상 프레임을 판단한다.
303단계에서 제어부(10)는 시간 정보 검출부(40)를 통해서 동영상 데이터 내에서 판단된 동영상 구간에 대한 시간 정보를 검출한다. 다시 말해서, 제어부(10) 는 동영상 데이터 내에서 적어도 하나의 동영상 특징 정보가 검출된 동영상 프레임으로 구성된 특징 정보 검출 구간에 대한 시간 정보를 검출한다. 즉, 제어부(10)는 각 동영상 특징 정보가 검출된 적어도 하나의 동영상 프레임을 포함하는 특징 정보 검출 구간에 대한 시간 정보를 검출하도록 시간 정보 검출부(40)를 제어하는 것이다.
304단계에서 제어부(10)는 적어도 하나의 동영상 특징 정보별로 타임 라인 내에 동영상 데이터를 표시부(60)를 통해서 표시한다. 예를 들어, 제어부(10)는 얼굴, 표정, 음성 장면 전환과 같은 4개의 특징 정보별로 타임라인 내에 각 4개의 동영상 데이터를 표시한다.
305단계에서 제어부(10)는 검출된 시간 정보를 이용하여 동영상 특징 정보가 검출된 각 동영상 구간에 대한 정보를 표시부(60)를 통해서 특정 색상으로 표시한다. 예를 들어, 제어부(10)는 얼굴 특징 정보에 해당하는 타임 라인 내에 표시된 동영상 데이터 상에 얼굴이 검출된 동영상 구간에 대한 정보를 노란색과 같은 특정 색상으로 구분되도록 표시부(60)를 통해서 표시할 수 있다. 다시 말해서, 제어부(10)는 하나의 특징 정보에 대하여 동영상 구간에 대한 정보를 복수의 색상으로 표시할 수 있다.
306단계에서 제어부(10)는 동영상 편집이 완료되었는지 여부를 판단하여 동영상 편집이 완료되면 307단계로 진행하고, 동영상 편집이 완료되지 않으면 306단계에서 동영상 편집이 완료되었는지 여부를 계속적으로 판단한다.
307단계에서 제어부(10)는 동영상 편집 기능을 완료한 후 동영상 편집을 위한 동영상 특징 정보를 가이드하기 위한 과정을 종료한다.
이와 같이 본 발명은 동영상 편집 시 사용자가 관심을 가지는 동영상 특징 정보가 포함된 동영상 구간에 대한 정보를 구분되도록 표시함으로써 사용자가 보다 편리하게 동영상을 편집할 수 있도록 한다.
도 4는 본 발명의 실시 예에 따른 동영상 편집 화면을 설명하기 위한 예시도이다.
본 발명의 실시 예에서는 얼굴, 표정, 음성, 장면 전환을 포함하는 동영상 특징 정보별로 대응되는 타임라임 내 동영상 데이터를 표시하는 것을 설명하였으나, 이러한 동영상 특징 정보는 그 외 여러가지 특징 정보를 포함할 수 있다. 또한, 이러한 동영상 특징 정보는 장치 내에 미리 설정될 수 있고, 사용자가 동영상 편집을 위해서 가이드를 원하는 동영상 특징 정보를 선택할 수도 있다.
본 발명의 실시 예에 따른 도 4의 동영상 편집 화면은 동영상 데이터를 미리보기 가능한 동영상 미리보기 영역과, 원본 동영상 데이터를 표시하는 원본 데이터 타임라인과, 얼굴, 표정, 음성, 장면 전환에 해당하는 각 타임라인과, 장면 전환에 의해 구분된 각 장면 전환 데이터를 선택하여 표시할 수 있는 요약 타임라인을 포함한다.
도 4와 같이 제어부(10)는 얼굴, 표정, 음성, 장면 전환에 대응하는 동영상 특징 정보별로 대응하는 각 타임라인 내에 동영상 데이터를 표시하고, 얼굴이 검출된 동영상 구간, 표정이 검출된 동영상 구간, 음성이 검출된 동영상 구간, 장면 전환이 검출된 동영상 구간에 대한 정보를 복수의 색상으로 표시한다. 이에 따라, 사용자에게 얼굴이 검출된 동영상 구간이 동영상 내 어느 부분에 해당하는지를 가이드해줄 수 있게 된다.
이와 같이 본 발명은 동영상 편집 시 사용자가 관심을 가지는 동영상 특징 정보가 포함된 동영상 구간을 표시함으로써 사용자가 보다 편리하게 동영상을 편집할 수 있도록 한다.
본 발명의 실시 예들은 하드웨어, 소프트웨어 또는 하드웨어 및 소프트웨어의 조합의 형태로 실현 가능하다는 것을 알 수 있을 것이다. 이러한 임의의 소프트웨어는 예를 들어, 삭제 가능 또는 재기록 가능 여부와 상관없이, ROM 등의 저장 장치와 같은 휘발성 또는 비휘발성 저장 장치, 또는 예를 들어, RAM, 메모리 칩, 장치 또는 집적 회로와 같은 메모리, 또는 예를 들어 CD, DVD, 자기 디스크 또는 자기 테이프 등과 같은 광학 또는 자기적으로 기록 가능함과 동시에 기계(예를 들어, 컴퓨터)로 읽을 수 있는 저장 매체에 저장될 수 있다. 본 발명의 동영상 특징 정보 가이드 방법은 제어부 및 메모리를 포함하는 컴퓨터 또는 휴대 단말에 의해 구현될 수 있고, 상기 메모리는 본 발명의 실시 예들을 구현하는 지시들을 포함하는 프로그램 또는 프로그램들을 저장하기에 적합한 기계로 읽을 수 있는 저장 매체의 한 예임을 알 수 있을 것이다. 따라서, 본 발명은 본 명세서의 임의의 청구항에 기재된 장치 또는 방법을 구현하기 위한 코드를 포함하는 프로그램 및 이러한 프로그램을 저장하는 기계(컴퓨터 등)로 읽을 수 있는 저장 매체를 포함한다. 또한, 이러한 프로그램은 유선 또는 무선 연결을 통해 전달되는 통신 신호와 같은 임의의 매체를 통해 전자적으로 이송될 수 있고, 본 발명은 이와 균등한 것을 적절하게 포함한다.
또한, 상기 동영상 편집 장치는 유선 또는 무선으로 연결되는 프로그램 제공 장치로부터 상기 프로그램을 수신하여 저장할 수 있다. 상기 프로그램 제공 장치는 상기 동영상 편집 장치가 기설정된 사용자 인터페이스 이전 방법을 수행하도록 하는 지시들을 포함하는 프로그램, 사용자 인터페이스 이전 방법에 필요한 정보 등을 저장하기 위한 메모리와, 상기 동영상 편집 장치와의 유선 또는 무선 통신을 수행하기 위한 통신부와, 상기 동영상 편집 장치의 요청 또는 자동으로 해당 프로그램을 상기 동영상 편집 장치로 전송하는 제어부를 포함할 수 있다.
10: 제어부
20: 입력부
30: 특징 정보 판단부
40: 시간 정보 검출부
50: 저장부
60: 표시부

Claims (13)

  1. 동영상 특징 정보를 가이드하는 동영상 편집 장치에 있어서,
    동영상 데이터에서 적어도 하나의 동영상 특징 정보를 포함하는 동영상 구간들을 판단하는 특징 정보 판단부와,
    상기 판단된 동영상 구간들에 대응하는 시간 정보를 검출하는 시간 정보 검출부와,
    상기 동영상 데이터를 표시하는 표시부와,
    동영상 편집 요청에 따라 동영상 특징 정보를 포함하는 동영상 구간들을 판단하도록 상기 특징 정보 판단부를 제어하고, 각 판단된 동영상 구간들에 대응하는 시간 정보를 검출하도록 상기 시간 정보 검출부를 제어하며, 상기 검출된 시간 정보를 이용하여 상기 판단된 동영상 구간들에 대한 정보를 상기 표시부에 표시하는 제어부를 포함하는 것을 특징으로 하는 동영상 편집 장치.
  2. 제1항에 있어서, 상기 특징 정보 판단부는,
    상기 동영상 데이터의 각 동영상 프레임 내에서 상기 적어도 하나의 동영상 특징 정보를 검출하고, 상기 적어도 하나의 동영상 특징 정보가 검출되는 동영상 프레임을 상기 동영상 구간으로 판단하는 것을 특징으로 하는 동영상 편집 장치.
  3. 제1항에 있어서, 상기 동영상 특징 정보는,
    얼굴, 표정, 음성, 장면 전환 중 적어도 하나의 특징 정보를 포함하는 것을 특징으로 하는 동영상 편집 장치.
  4. 제1항에 있어서, 상기 제어부는,
    상기 표시부를 통해서 상기 적어도 하나의 특징 정보별로 상기 판단된 동영상 구간들에 대한 정보를 타임라인에 표시하는 것을 특징으로 하는 동영상 편집 장치.
  5. 제4항에 있어서, 상기 제어부는,
    상기 판단된 동영상 구간들에 대한 정보를 특징 정보별로 서로 다른 색상으로 표시하는 것을 특징으로 하는 동영상 편집 장치.
  6. 제5항에 있어서, 상기 제어부는,
    하나의 특징 정보에 다하여 상기 판단된 동영상 구간들에 대한 정보를 복수의 색상으로 표시하는 것을 특징으로 하는 동영상 편집 장치.
  7. 동영상 편집 장치에서 동영상 특징 정보를 가이드하는 동영상 편집 방법에 있어서,
    동영상 편집 요청에 따라 동영상 데이터에서 적어도 하나의 동영상 특징 정보를 포함하는 동영상 구간들을 판단하는 과정과,
    상기 판단된 동영상 구간들에 대응하는 시간 정보를 검출하는 과정과,
    상기 동영상 데이터를 표시하는 과정과,
    상기 검출된 시간 정보를 이용하여 상기 판단된 동영상 구간들에 대한 정보를 표시하는 과정을 포함하는 것을 특징으로 하는 동영상 편집 방법.
  8. 제7항에 있어서, 상기 동영상 구간을 판단하는 과정은,
    상기 동영상 데이터의 각 동영상 프레임 내에서 상기 적어도 하나의 동영상 특징 정보를 검출하는 과정과,
    상기 적어도 하나의 동영상 특징 정보가 검출되는 동영상 프레임을 상기 동영상 구간으로 판단하는 과정을 포함하는 것을 특징으로 하는 동영상 편집 방법.
  9. 제7항에 있어서, 상기 동영상 특징 정보는,
    얼굴, 표정, 음성, 장면 전환 중 적어도 하나의 특징 정보를 포함하는 것을 특징으로 하는 동영상 편집 방법.
  10. 제7항에 있어서, 상기 동영상 구간에 대한 정보를 표시하는 과정은,
    상기 적어도 하나의 특징 정보별로 상기 판단된 동영상 구간들에 대한 정보를 타임라인에 표시하는 과정임을 특징으로 하는 동영상 편집 방법.
  11. 제10항에 있어서, 상기 동영상 구간에 대한 정보를 표시하는 과정은,
    상기 판단된 동영상 구간들에 대한 정보를 특징 정보별로 서로 다른 색상으로 표시하는 과정을 더 포함하는 것을 특징으로 하는 동영상 편집 방법.
  12. 제11항에 있어서, 상기 서로 다른 색상으로 표시하는 과정은,
    하나의 특징 정보에 대하여 상기 판단된 동영상 구간들에 대한 정보를 복수의 색상으로 표시하는 과정임을 특징으로 하는 동영상 편집 방법.
  13. 제7항 내지 제12항 중 어느 한 항에 따른 동영상 편집 방법을 실행하기 위한 프로그램을 기록한 기계로 읽을 수 있는 저장 매체.
KR1020120023555A 2012-03-07 2012-03-07 동영상 특징 정보를 가이드하기 위한 동영상 편집 장치 및 방법 KR20130102368A (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020120023555A KR20130102368A (ko) 2012-03-07 2012-03-07 동영상 특징 정보를 가이드하기 위한 동영상 편집 장치 및 방법
EP13158053.2A EP2637172A1 (en) 2012-03-07 2013-03-06 Video editing apparatus and method for guiding video feature information
US13/787,068 US20130236162A1 (en) 2012-03-07 2013-03-06 Video editing apparatus and method for guiding video feature information
CN2013100721585A CN103312943A (zh) 2012-03-07 2013-03-07 用于指导视频特征信息的视频编辑装置和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120023555A KR20130102368A (ko) 2012-03-07 2012-03-07 동영상 특징 정보를 가이드하기 위한 동영상 편집 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20130102368A true KR20130102368A (ko) 2013-09-17

Family

ID=47997008

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120023555A KR20130102368A (ko) 2012-03-07 2012-03-07 동영상 특징 정보를 가이드하기 위한 동영상 편집 장치 및 방법

Country Status (4)

Country Link
US (1) US20130236162A1 (ko)
EP (1) EP2637172A1 (ko)
KR (1) KR20130102368A (ko)
CN (1) CN103312943A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106851044A (zh) * 2016-12-13 2017-06-13 深圳英飞拓科技股份有限公司 一种视频同步回放方法及装置
KR20200062843A (ko) * 2018-11-27 2020-06-04 에스케이텔레콤 주식회사 표정 기반 컨텐츠 추천 장치, 이를 위한 방법 및 이 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101978216B1 (ko) * 2013-01-04 2019-05-14 엘지전자 주식회사 이동 단말기 및 그 제어방법
US9336685B2 (en) * 2013-08-12 2016-05-10 Curious.Com, Inc. Video lesson builder system and method
CN104902342B (zh) * 2014-03-07 2018-12-21 无锡天脉聚源传媒科技有限公司 一种基于场景帧来定位视频的系统及其方法
CN104980677B (zh) * 2014-04-02 2018-12-14 联想(北京)有限公司 一种在视频中添加标签的方法及装置
US10381042B2 (en) 2014-11-14 2019-08-13 Samsung Electronics Co., Ltd. Method and system for generating multimedia clip
CN104506887B (zh) * 2014-12-31 2017-10-17 成都东方盛行电子有限责任公司 一种音视频技审方法
KR102306538B1 (ko) 2015-01-20 2021-09-29 삼성전자주식회사 콘텐트 편집 장치 및 방법
CN105898368A (zh) * 2015-11-18 2016-08-24 乐视致新电子科技（天津）有限公司 视频片段快速搜寻方法和系统
CN106921891B (zh) * 2015-12-24 2020-02-11 北京奇虎科技有限公司 一种视频特征信息的展示方法和装置
JP6589838B2 (ja) * 2016-11-30 2019-10-16 カシオ計算機株式会社 動画像編集装置及び動画像編集方法
US20180295427A1 (en) * 2017-04-07 2018-10-11 David Leiberman Systems and methods for creating composite videos
US12033669B2 (en) 2020-09-10 2024-07-09 Adobe Inc. Snap point video segmentation identifying selection snap points for a video
US11880408B2 (en) 2020-09-10 2024-01-23 Adobe Inc. Interacting with hierarchical clusters of video segments using a metadata search
US11631434B2 (en) 2020-09-10 2023-04-18 Adobe Inc. Selecting and performing operations on hierarchical clusters of video segments
US11810358B2 (en) 2020-09-10 2023-11-07 Adobe Inc. Video search segmentation
US11887629B2 (en) * 2020-09-10 2024-01-30 Adobe Inc. Interacting with semantic video segments through interactive tiles
US11450112B2 (en) 2020-09-10 2022-09-20 Adobe Inc. Segmentation and hierarchical clustering of video
US11630562B2 (en) 2020-09-10 2023-04-18 Adobe Inc. Interacting with hierarchical clusters of video segments using a video timeline
US11995894B2 (en) 2020-09-10 2024-05-28 Adobe Inc. Interacting with hierarchical clusters of video segments using a metadata panel
US11887371B2 (en) 2020-09-10 2024-01-30 Adobe Inc. Thumbnail video segmentation identifying thumbnail locations for a video
CN113157181B (zh) * 2021-03-30 2024-01-05 北京达佳互联信息技术有限公司 操作引导方法及装置
DE102022105123A1 (de) * 2021-05-26 2022-12-01 Adobe Inc. Interagieren mit semantischen Videosegmenten durch interaktive Kacheln
CN114302253B (zh) * 2021-11-25 2024-03-12 北京达佳互联信息技术有限公司 媒体数据处理方法、装置、设备及存储介质

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5717879A (en) * 1995-11-03 1998-02-10 Xerox Corporation System for the capture and replay of temporal data representing collaborative activities
KR19990077225A (ko) * 1996-11-22 1999-10-25 이데이 노부유끼 편집 장치, 편집 시스템 및 편집 방법
JP3409834B2 (ja) * 1997-07-10 2003-05-26 ソニー株式会社 画像処理装置および画像処理方法、並びに記録媒体
US20030117428A1 (en) * 2001-12-20 2003-06-26 Koninklijke Philips Electronics N.V. Visual summary of audio-visual program features
JP4065142B2 (ja) * 2002-05-31 2008-03-19 松下電器産業株式会社 オーサリング装置およびオーサリング方法
GB2395780A (en) * 2002-11-29 2004-06-02 Sony Uk Ltd Face detection
JP2007281680A (ja) * 2006-04-04 2007-10-25 Sony Corp 画像処理装置および画像表示方法
US20090043646A1 (en) * 2007-08-06 2009-02-12 International Business Machines Corporation System and Method for the Automated Capture and Clustering of User Activities

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106851044A (zh) * 2016-12-13 2017-06-13 深圳英飞拓科技股份有限公司 一种视频同步回放方法及装置
CN106851044B (zh) * 2016-12-13 2020-01-03 深圳英飞拓科技股份有限公司 一种视频同步回放方法及装置
KR20200062843A (ko) * 2018-11-27 2020-06-04 에스케이텔레콤 주식회사 표정 기반 컨텐츠 추천 장치, 이를 위한 방법 및 이 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체

Also Published As

Publication number Publication date
CN103312943A (zh) 2013-09-18
EP2637172A1 (en) 2013-09-11
US20130236162A1 (en) 2013-09-12

Similar Documents

Publication Publication Date Title
KR20130102368A (ko) 동영상 특징 정보를 가이드하기 위한 동영상 편집 장치 및 방법
US9685199B2 (en) Editing apparatus and editing method
US8204312B2 (en) Moving image editing apparatus
JP4581924B2 (ja) 画像再生装置、および画像再生プログラム
EP3340613B1 (en) Image processing method, image processing device, and program
US20040263529A1 (en) Authoring device and authoring method
US9071806B2 (en) Reproducing apparatus
KR102052723B1 (ko) 포터블 피부 상태 측정 장치, 및 피부 상태 진단 및 관리 시스템
US10459976B2 (en) Method, apparatus and system for applying an annotation to a portion of a video sequence
KR102072022B1 (ko) 관심영역 기반의 영상요약 장치와 그를 위한 컴퓨터로 읽을 수 있는 기록 매체
CN110502117B (zh) 电子终端中的截图方法以及电子终端
KR20190063524A (ko) 편광 필름을 포함하는 포터블 피부 상태 측정 장치, 및 피부 상태 진단 및 관리 시스템
US10460196B2 (en) Salient video frame establishment
CN104170367B (zh) 一种图像捕获方法、装置及计算机可读介质
JP3897476B2 (ja) 画像処理装置及びその方法、コンピュータ可読メモリ
US8174567B2 (en) Digital photographing apparatus, method of controlling the apparatus, and recording medium having recorded thereon program for executing the method
KR20160123647A (ko) 객체 추적을 이용한 동영상 부가정보 제공 장치 및 제공 방법
JP2013121097A (ja) 撮像装置及び方法、並びに画像生成装置及び方法、プログラム
CN105792005B (zh) 录像控制的方法及装置
JP5012644B2 (ja) プレゼンテーション記録装置、プレゼンテーション再生装置及びプログラム
KR20130104027A (ko) 영상 재생 방법 및 장치
JP5464965B2 (ja) 画像処理装置及びその制御方法、並びにプログラム及び記憶媒体
KR20110132066A (ko) 영상표시기기의 영상 검색 장치 및 방법
JP2000235637A (ja) 画像処理システム及び画像処理方法
JP2017108326A (ja) 情報処理装置、その制御方法、及びプログラム

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid