KR20160044981A - 동영상 처리 장치 및 방법 - Google Patents

동영상 처리 장치 및 방법 Download PDF

Info

Publication number
KR20160044981A
KR20160044981A KR1020140140171A KR20140140171A KR20160044981A KR 20160044981 A KR20160044981 A KR 20160044981A KR 1020140140171 A KR1020140140171 A KR 1020140140171A KR 20140140171 A KR20140140171 A KR 20140140171A KR 20160044981 A KR20160044981 A KR 20160044981A
Authority
KR
South Korea
Prior art keywords
video frame
representative
moving picture
input
video
Prior art date
Application number
KR1020140140171A
Other languages
English (en)
Other versions
KR102340196B1 (ko
Inventor
조계욱
김원철
이상훈
김종우
이민
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020140140171A priority Critical patent/KR102340196B1/ko
Priority to CN201580042171.3A priority patent/CN106576151B/zh
Priority to US15/324,019 priority patent/US10014029B2/en
Priority to EP15850379.7A priority patent/EP3143764A4/en
Priority to PCT/KR2015/006112 priority patent/WO2016060358A1/en
Publication of KR20160044981A publication Critical patent/KR20160044981A/ko
Application granted granted Critical
Publication of KR102340196B1 publication Critical patent/KR102340196B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/49—Segmenting video sequences, i.e. computational techniques such as parsing or cutting the sequence, low-level clustering or determining units such as shots or scenes
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction

Abstract

동영상을 처리하는 방법에 있어서, 복수의 비디오 프레임들 및 오디오로 구성된 입력 동영상을 획득하는 단계, 상기 입력 동영상을 적어도 하나의 구간으로 분할하는 단계, 상기 적어도 하나의 구간 각각에 대하여, 상기 구간에 포함된 상기 비디오 프레임들 중 대표 비디오 프레임을 결정하는 단계, 상기 대표 비디오 프레임들 각각이 상기 오디오에 동기화되어, 상기 대표 비디오 프레임에 대응되는 상기 구간의 재생 시간만큼 표시되는 슬라이드 동영상을 획득하는 단계를 포함하는 동영상 처리 방법이 제공된다.

Description

동영상 처리 장치 및 방법{VIDEO PROCESSING APPARATUS AND METHOD OF OPERATIONS THEREOF}
동영상 처리 장치 및 방법에 관한 것으로, 구체적으로는 동영상에 포함된 복수의 비디오 프레임들 중 일부 대표 비디오 프레임을 표시한 슬라이드 동영상을 획득하는 동영상 처리 장치 및 방법에 관한 것이다.
TV에 스마트 기능이 보급됨에 따라, TV는 단순히 영상 및 음성 신호로 구성된 컨텐츠를 전달받아 재생하는 기본적 기능뿐만 아니라 컨텐츠를 사용자의 기호에 따라 처리하는 기능을 구현할 수 있게 되었다. 따라서 스마트 TV에 탑재될 수 있는 컨텐츠 처리 기능을 가진 장치 또는 애플리케이션의 중요성이 높아지고 있다. 이러한 컨텐츠 처리 기능의 개발은 스마트 TV 시장에서의 성공에 있어서 중요한 요소가 될 수 있을 것이다.
입력 동영상으로부터 대표 비디오 프레임과 오디오로 구성된 슬라이드 동영상을 획득하는 동영상 처리 장치 및 방법의 실시 예가 제공된다. 또한, 본 발명의 일 실시 예에 따른 동영상 처리 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체가 개시된다. 본 실시 예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 이하의 실시 예들로부터 또 다른 기술적 과제들이 유추될 수 있다.
동영상을 처리하는 방법에 있어서, 복수의 비디오 프레임들 및 오디오로 구성된 입력 동영상을 획득하는 단계, 상기 입력 동영상을 적어도 하나의 구간으로 분할하는 단계, 상기 적어도 하나의 구간 각각에 대하여, 상기 구간에 포함된 상기 비디오 프레임들 중 대표 비디오 프레임을 결정하는 단계, 및 상기 대표 비디오 프레임들 각각이 상기 오디오에 동기화되어, 상기 대표 비디오 프레임에 대응되는 상기 구간의 재생 시간만큼 표시되는 슬라이드 동영상을 획득하는 단계를 포함하는 동영상 처리 방법이 제공된다.
상기 입력 동영상을 분할하는 단계는, 상기 구간의 길이가 일정하도록 상기 입력 동영상을 분할하는 것을 특징으로 할 수 있다.
상기 대표 비디오 프레임을 결정하는 단계는, 상기 입력 동영상에 포함된 프레임들에 대한 시청자들의 반응이 포함된 시청자 선호도 정보가 상기 입력 동영상과 함께 제공되는 경우, 상기 시청자 선호도 정보에 기초하여 상기 대표 비디오 프레임을 결정하는 것을 특징으로 할 수 있다.
상기 대표 비디오 프레임을 결정하는 단계는, 상기 오디오 및 상기 비디오 프레임들 중 적어도 하나의 분석에 기초하여 상기 대표 비디오 프레임을 결정하는 것을 특징으로 할 수 있다.
상기 대표 비디오 프레임을 결정하는 단계는, 특정한 소리가 상기 오디오로부터 검출된 경우, 상기 특정한 소리가 재생되는 위치에 기초하여 대표 비디오 프레임으로 결정하는 것을 특징으로 할 수 있다.
상기 대표 비디오 프레임을 결정하는 단계는, 상기 입력 동영상에서 제공되는 특정 객체가 상기 비디오 프레임에 포함되어 있는 경우, 상기 비디오 프레임을 대표 비디오 프레임으로 결정하는 것을 특징으로 하는 동영상 처리 방법.
상기 입력 동영상에 부속되는 텍스트 정보가 제공되는 경우, 상기 대표 비디오 프레임에 대응되는 대표 텍스트를 추출하는 단계를 더 포함하고, 상기 슬라이드 동영상을 획득하는 단계는, 상기 대표 비디오 프레임에 상기 대표 비디오 프레임과 대응되는 상기 대표 텍스트가 포함된 상기 슬라이드 동영상을 획득하는 것을 특징으로 할 수 있다.
동영상을 처리하는 장치에 있어서, 복수의 비디오 프레임들 및 오디오로 구성된 입력 동영상을 입력부, 및 상기 입력 동영상을 적어도 하나의 구간으로 분할하고, 상기 적어도 하나의 구간 각각에 대하여, 상기 구간에 포함된 상기 비디오 프레임들 중 대표 비디오 프레임을 결정하며, 상기 대표 비디오 프레임들 각각이 상기 오디오에 동기화되어, 상기 대표 비디오 프레임에 대응되는 상기 구간의 재생 시간만큼 표시되는 슬라이드 동영상을 획득하는 동영상 처리부를 포함하는 동영상 처리 장치가 제공된다.
상기 동영상 처리부는, 상기 구간의 길이가 일정하도록 상기 입력 동영상을 분할하는 것을 특징으로 할 수 있다.
상기 동영상 처리부는, 상기 입력 동영상에 포함된 프레임들에 대한 시청자들의 반응이 포함된 시청자 선호도 정보가 상기 입력 동영상과 함께 제공되는 경우, 상기 시청자 선호도 정보에 기초하여 상기 대표 비디오 프레임을 결정하는 것을 특징으로 할 수 있다.
상기 동영상 처리부는, 상기 오디오 및 상기 비디오 프레임들 중 적어도 하나의 분석에 기초하여 상기 대표 비디오 프레임을 결정하는 것을 특징으로 할 수 있다.
상기 동영상 처리부는, 특정한 소리가 상기 오디오로부터 검출된 경우, 상기 특정한 소리가 재생되는 위치에 기초하여 대표 비디오 프레임으로 결정하는 것을 특징으로 할 수 있다.
상기 동영상 처리부는, 상기 입력 동영상에서 제공되는 특정 객체가 상기 비디오 프레임에 포함되어 있는 경우, 상기 비디오 프레임을 대표 비디오 프레임으로 결정하는 것을 특징으로 할 수 있다.
상기 입력부는, 상기 입력 동영상에 부속되는 텍스트 정보가 제공되는 경우, 상기 텍스트 정보를 획득하고, 상기 동영상 처리부는, 상기 텍스트 정보에서 상기 대표 비디오 프레임에 대응되는 대표 텍스트를 추출하고, 상기 대표 비디오 프레임에 상기 대표 비디오 프레임과 대응되는 상기 대표 텍스트가 포함된 상기 슬라이드 동영상을 획득하는 것을 특징으로 할 수 있다.
상기 영상 표시 방법들을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록매체가 제공된다.
도 1 은 슬라이드 동영상을 설명하기 위한 도면이다.
도 2 는 동영상 처리 장치의 일 실시예의 블록도이다.
도 3 는 대표 비디오 프레임을 결정하는 일 실시예를 설명하기 위한 도면이다.
도 4 는 대표 비디오 프레임을 결정하는 또 다른 일 실시예를 설명하기 위한 도면이다.
도 5 는 슬라이드 동영상에 텍스트를 표시하는 일 실시예를 설명하기 위한 도면이다.
도 6 은 동영상 처리 방법의 일 실시예의 흐름도이다.
도 7 는 슬라이드 동영상 파일의 구성을 설명하기 위한 도면이다.
도 8a 내지 8d는 슬라이드 동영상 생성 및 재생 기능을 가진 프로그램의 일 실시예를 설명하기 위한 도면이다.
이하 첨부된 도면을 참고하면서 본 발명을 한정하지 아니하고 오로지 예시를 위한 실시예에 의해 본 발명을 상세히 설명하기로 한다. 본 발명의 하기 실시예는 본 발명을 구체화하기 위한 것일 뿐 본 발명의 권리 범위를 제한하거나 한정하는 것이 아님은 물론이다. 본 발명의 상세한 설명 및 실시예로부터 본 발명이 속하는 기술분야의 전문가가 용이하게 유추할 수 있는 것은 본 발명의 권리범위에 속하는 것으로 해석된다.
도 1 은 슬라이드 동영상을 설명하기 위한 도면이다.
상단부 블록(100)에는 동영상 처리 장치에 의하여 처리되기 이전의 입력 동영상의 오디오(110) 및 복수의 비디오 프레임들(120, 122, 124, 126, 128, 130)이 시간의 흐름에 따라 표시되어 있다. 상단부 블록(100)에는 설명의 편의를 위하여 6개의 비디오 프레임들(120, 122, 124, 126, 128, 130)만이 표시되어 있지만, 더 많은 비디오 프레임들이 입력 동영상에 포함되어 있을 수 있다. 좌측에 있는 비디오 프레임이 우측에 있는 비디오 프레임에 비하여 시간상 앞서는 비디오 프레임이다. 따라서 가장 좌측의 비디오 프레임(120)이 시간상 가장 앞의 비디오 프레임이며, 가장 우측의 비디오 프레임(130)이 시간상 가장 뒤의 비디오 프레임이다.
상단부 블록(100)은 중앙의 점선(125)을 기준으로 두 개의 구간으로 분할된다. 점선(125) 좌측 구간에는 비디오 프레임들(120, 122, 124)이 포함된다. 점선(125) 우측 구간에는 비디오 프레임(126, 128, 130)이 포함된다. 일 예로, 각 구간마다 하나의 대표 비디오 프레임이 결정된다. 도 1에 도시된 바에 의하면 점선(125) 좌측 구간에는 비디오 프레임(122)이, 점선(125) 우측 구간에는 비디오 프레임(128)이 대표 비디오 프레임으로 결정되었다.
하단부 블록(150)에는 슬라이드 동영상의 오디오(160) 및 대표 비디오 프레임(170, 172)이 도시되어 있다. 하단부 블록(150)의 오디오(160)는 상단부 블록(100)의 오디오(110)와 동일할 수 있다. 도 1에 도시된 바에 의하면, 점선 좌측 구간에는 비디오 프레임(122)이 대표 비디오 프레임으로 결정되었으므로, 대표 비디오 프레임(170)은 비디오 프레임(122)과 동일하다. 또한 점선 우측 구간에는 비디오 프레임(128)이 대표 비디오 프레임으로 결정되었으므로, 대표 비디오 프레임(172)은 비디오 프레임(128)과 동일하다.
슬라이드 동영상에서 대표 비디오 프레임(170)은 입력 동영상에서 비디오 프레임들(120, 122, 124)이 재생되는 구간에서 표시된다. 마찬가지로 슬라이드 동영상에서 대표 비디오 프레임(172)은 입력 동영상에서 비디오 프레임들(126, 128, 130)이 재생되는 구간에서 표시된다.
도 1에서 설명의 편의를 위하여 대표 비디오 프레임이 3개의 비디오 프레임을 대표하여 표시되는 것으로 나타나있지만, 실제 구현되는 경우, 대표 비디오 프레임은 더 많거나 더 적은 수의 비디오 프레임을 대표하여 표시될 수도 있다.
도 2 는 동영상 처리 장치(200)의 일 실시예의 블록도이다.
동영상 처리 장치(200)는 입력부(210), 동영상 처리부(220), 저장부(230) 및 출력부(240)를 포함할 수 있다. 도 2에서 입력부(210) 및 출력부(240)는 별도의 구성 단위로 표현되어 있으나, 실시 예에 따라 입력부(210)와 출력부(240)는 합쳐져 동일한 구성 단위로 구현될 수도 있다. 마찬가지로 동영상 처리부(220) 역시 입력부(210)및 출력부(240) 중 적어도 하나의 구성 단위와 합쳐져 구현될 수도 있다. 도 2에서 입력부(210), 동영상 처리부(220), 저장부(230) 및 출력부(240)는 동영상 처리 장치(200) 내부에 위치한 구성 단위로 표현되었지만, 입력부(210), 동영상 처리부(220), 저장부(230) 및 출력부(240)의 각 기능을 담당하는 장치는 반드시 물리적으로 인접할 필요는 없다. 따라서 실시 예에 따라 입력부(210), 동영상 처리부(220), 저장부(230) 및 출력부(240)가 분산되어 있을 수 있다. 도 2의 동영상 처리 장치(200)는 물리적 장치에 한정되지 않는다. 예를 들어 동영상 처리 장치(200)의 기능 중 일부는 하드웨어가 아닌 소프트웨어로 구현될 수도 있다.
입력부(210)는 복수의 비디오 프레임들 및 오디오로 구성된 입력 동영상을 획득할 수 있다. 입력부(210)는 입력 동영상에 부속된 다양한 종류의 데이터를 획득할 수 있다. 예를 들어 입력 동영상이 자막과 같은 텍스트 정보를 포함할 경우, 입력부(210)는 텍스트 정보 역시 획득할 수 있다. 또 다른 예를 들어 입력 동영상이 입력 동영상의 생산자, 재생 길이, 인코딩 방식 등에 대한 메타 데이터를 포함하고 있는 경우, 입력부(210)는 메타 데이터 역시 획득할 수 있다.
입력부(210)는 다양한 소스로부터 입력 동영상을 획득할 수 있다. 예를 들어, 입력부(210)는 실시간으로 방송 신호(212)로부터 일정 간격으로 입력 동영상을 획득할 수 있다. 또 다른 예를 들어, 입력부(210)는 CD, DVD, USB, HDMI 등과 같은 외부 입력 소스(214)로부터 입력 동영상을 획득할 수도 있다.
동영상 처리부(220)는 비디오 처리부(222), 오디오 처리부(228) 및 슬라이드 동영상 생성부(229)로 구성될 수 있다.
비디오 처리부(222)는 입력 동영상 분할부(224) 및 대표 비디오 프레임 결정부(226)로 구성될 수 있으며, 입력 동영상으로부터 대표 비디오 프레임을 결정한다.
입력 동영상 분할부(224)는 입력 동영상을 적어도 하나의 구간으로 분할할 수 있다. 입력 동영상 분할부(224)는 입력 동영상을 분할할 때, 각 구간의 길이가 일정하도록 입력 동영상을 분할할 수 있다. 예를 들어, 입력 동영상 분할부(224)는 각 구간이 일정한 개수의 프레임을 가지도록 분할할 수 있다.
입력 동영상 분할부(224)는 실시 예에 따라 각 구간의 길이가 다르게 입력 동영상을 분할할 수 있다. 예를 들어, 입력 동영상 분할부(224)는 입력 동영상에 인물들의 대화에 관한 텍스트가 포함된 경우, 텍스트의 양에 기초하여 각 구간의 길이가 다르도록 분할할 수 있다.
대표 비디오 프레임 결정부(226)는 입력 동영상 분할부(224)에서 분할된 적어도 하나의 구간 각각에 대하여, 각 구간에 포함된 비디오 프레임들 중 대표 비디오 프레임을 결정할 수 있다. 대표 비디오 프레임 결정부(226)에서 대표 비디오 프레임을 결정하는 기준은 다양하다. 예를 들어, 대표 비디오 프레임 결정부(226)는 입력부(210)에서 입력 동영상에 포함된 프레임들에 대한 시청자 선호도 정보가 획득된 경우, 시청자 선호 정보에 기초하여 대표 비디오 프레임을 결정할 수 있다. 또 다른 예로 대표 비디오 프레임 결정부(226)는 오디오 및 비디오 프레임들 중 적어도 하나의 분석에 기초하여 대표 비디오 프레임을 결정할 수 있다. 오디오 및 비디오 프레임들의 분석에 기초하여 대표 비디오 프레임을 결정하는 실시 예는 도 3및 도 4에 도시되어 있다.
대표 비디오 프레임 결정부(226)는 결정된 대표 비디오 프레임을 인코딩한 후 출력할 수 있다. 예를 들어 대표 비디오 프레임 결정부(226)는 대표 비디오 프레임을을 jpg, gif, png 등의 파일의 형태로 인코딩하고, 인코딩된 대표 비디오 프레임을 출력할 수 있다.
오디오 처리부(228)는 입력 동영상으로부터 오디오 데이터를 추출할 수 있다. 오디오 처리부(228)는 추출된 오디오 데이터를 인코딩하여 출력할 수 있다. 예를 들어 오디오 처리부(228)는 오디오 데이터를 mp3, wma 등의 파일의 형태로 인코딩하고, 인코딩된 오디오 데이터를 출력할 수 있다.
슬라이드 동영상 생성부(229)는 비디오 처리부(222)에서 출력된 대표 비디오 프레임과 오디오 처리부(228)에서 출력된 오디오 데이터를 동기화하여 슬라이드 동영상을 생성할 수 있다. 예를 들어 대표 비디오 프레임 A가 입력 동영상에서 00:00~00:05에 포함된 비디오 프레임들을 대표하는 경우, 상기 대표 비디오 프레임A는 오디오 데이터의 00:00~00:05에 해당하는 부분과 동기화될 수 있다. 이렇게 생성된 슬라이드 동영상은 00:00~00:05 구간에서 오디오 데이터의 00:00~00:05에 해당하는 부분을 재생하면서, 동시에 대표 비디오 프레임A을 표시한다.
슬라이드 동영상 생성부(229)는 입력 동영상과 함께 제공된 메타 데이터를 슬라이드 동영상에 포함시킬 수 있다. 예를 들어 슬라이드 동영상 생성부(229)는 입력 동영상의 생산자, 재생 길이, 인코딩 방식 등에 대한 메타 데이터를 슬라이드 동영상에 포함시킬 수 있다.
그리고 슬라이드 동영상 생성부(229)는 입력부(210)에서 입력 동영상에 부속되는 텍스트 정보가 획득된 경우, 텍스트 정보에서 대표 비디오 프레임에 대응되는 대표 텍스트를 추출하고, 대표 비디오 프레임으로 결정된 프레임에 대표 텍스트를 부가할 수 있다. 대표 텍스트를 대표 비디오 프레임에 부가하는 실시예는 도5에 도시되어 있다.
저장부(230)는 처리부(220)에서 획득한 슬라이드 동영상을 저장할 수 있다. 저장부(230)는 휘발성 메모리, 비 휘발성 메모리, 내부 메모리, 외부 메모리, 또는 이들의 조합일 수 있다. 예를 들어 저장부(230)는 비 휘발성 랜덤 액세스 메모리(NVRAM), 플래시 메모리, 디스크 저장 장치와 같은 비 휘발성 저장 장치 또는 정적 랜덤 액세스 메모리(SRAM)와 같은 휘발성 저장 장치일 수 있다.
저장부(230)는 슬라이드 동영상뿐만 아니라, 슬라이드 동영상을 구성하는 대표 비디오 프레임 및 오디오를 별도로 저장할 수도 있다. 또한 슬라이드 동영상이 자막과 같은 텍스트 정보 또는 입력 동영상의 메타 데이터 등도 제공하는 경우, 텍스트 정보 또는 메타 데이터 등도 저장할 수 있다.
출력부(240)는 처리부(220)에서 획득한 슬라이드 동영상 또는 저장부(230)에 저장된 슬라이드 동영상을 동영상 처리 장치(200)의 외부 장치로 출력할 수 있다. 출력부(240)는 외부 장치와 다양한 방식으로 통신적으로 연결될 수 있다.
도 3 및 도 4에 도 2의 비디오 프레임 결정부(226)가 오디오 또는 비디오 프레임들의 분석에 기초하여 대표 비디오 프레임을 결정하는 내용이 도시되어 있다.
도 3은 비디오 프레임들을 분석하여 대표 비디오 프레임을 결정하는 일 실시예를 설명하기 위한 도면이다.
상단부 블록(300)에는 입력 동영상의 복수의 비디오 프레임들(310, 320, 330, 340)이 시간의 흐름에 따라 표시되어 있다. 상단부 블록(300)에는 설명의 편의를 위하여 4개의 비디오 프레임들(310, 320, 330, 340)만이 표시되어 있지만, 더 많은 비디오 프레임들이 입력 동영상에 포함되어 있을 수 있다. 좌측에 있는 비디오 프레임이 우측에 있는 비디오 프레임에 비하여 시간상 앞서는 비디오 프레임이다. 따라서 가장 좌측의 비디오 프레임(310)이 시간상 가장 앞의 비디오 프레임이며, 가장 우측의 비디오 프레임(340)이 시간상 가장 뒤의 비디오 프레임이다.
상단부 블록(300)은 중앙의 점선을 기준으로 두 개의 구간으로 분할된다. 점선 좌측 구간에는 비디오 프레임들(310, 320)이 포함된다. 점선 우측 구간에는 비디오 프레임(330, 340)이 포함된다. 각 구간마다 하나의 대표 비디오 프레임이 결정된다.
구간에서 특정 객체가 포함된 프레임이 대표 비디오 프레임으로 결정될 수 있다. 도 3에서는, 사람이 포함된 비디오 프레임이 대표 비디오 프레임을 결정되었다. 그러므로 사람이 포함된 비디오 프레임(310, 330)은 대표 비디오 프레임으로 결정되었고, 반대로 사람이 포함되어 있지 않은 비디오 프레임(320, 340)은 대표 비디오 프레임으로 결정되지 못하였다. 그러므로 하단부 블록(350)의 대표 비디오 프레임(360)은 비디오 프레임(310)과 동일하다. 또한 대표 비디오 프레임(370)은 비디오 프레임(330)과 동일하다.
도 3에서 설명의 편의를 위하여 대표 비디오 프레임이 2개의 비디오 프레임을 대표하여 표시되는 것으로 나타나있지만, 실제 구현되는 경우, 대표 비디오 프레임은 더 많은 비디오 프레임을 대표하여 표시될 수도 있다.
도 4 는 오디오를 분석하여 대표 비디오 프레임을 결정하는 일 실시예를 설명하기 위한 도면이다.
상단부 블록(400)에는 입력 동영상의 복수의 비디오 프레임들(410, 420, 430, 440)이 시간의 흐름에 따라 표시되어 있다. 상단부 블록(400)에는 설명의 편의를 위하여 4개의 비디오 프레임들(410, 420, 430, 440)만이 표시되어 있을 뿐, 더 많은 비디오 프레임들이 입력 동영상에 포함되어 있을 수 있다.
좌측에 있는 비디오 프레임이 우측에 있는 비디오 프레임에 비하여 시간상 앞서는 비디오 프레임이다. 따라서 가장 좌측의 비디오 프레임(410)이 시간상 가장 앞의 비디오 프레임이며, 가장 우측의 비디오 프레임(440)이 시간상 가장 뒤의 비디오 프레임이다.
상단부 블록(400)은 중앙의 점선을 기준으로 두 개의 구간으로 분할된다. 점선 좌측 구간에는 비디오 프레임들(410, 420)이 포함된다. 점선 우측 구간에는 비디오 프레임(430, 440)이 포함된다. 각 구간마다 하나의 대표 비디오 프레임이 결정된다.
각 구간에서 특정 소리가 오디오로부터 검출되는 경우, 특정 소리가 재생되는 위치에 기초하여 대표 비디오 프레임이 결정될 수 있다. 도 4에서는, 사람의 음성이 인식된 재생 위치에 인접한 프레임이 대표 비디오 프레임으로 결정되었다. 따라서 비디오 프레임(410, 430)이 표시될 때 사람의 음성이 검출되며, 반대로 비디오 프레임(420, 440)이 표시될 때는 사람의 음성이 검출되지 않으므로, 점선 좌측 구간에는 비디오 프레임(410)이, 점선 우측 구간에는 비디오 프레임(420)이 대표 비디오 프레임으로 결정되었다. 그러므로 하단부 블록(450)의 대표 비디오 프레임(460)은 비디오 프레임(410)과 동일하다. 마찬가지로 대표 비디오 프레임(470)은 비디오 프레임(430)과 동일하다.
도 4에서 설명의 편의를 위하여 대표 비디오 프레임이 2개의 비디오 프레임을 대표하여 표시되는 것으로 나타나있지만, 실제 구현되는 경우, 대표 비디오 프레임은 더 많은 비디오 프레임을 대표하여 표시될 수도 있다.
도 5 는 대표 비디오 프레임에 대표 텍스트를 표시하는 일 실시예를 설명하기 위한 도면이다.
상단부 블록(500)에는 입력 동영상의 복수의 비디오 프레임들(510, 520, 530, 540)이 시간의 흐름에 따라 표시되어 있다. 상단부 블록(500)에는 설명의 편의를 위하여 4개의 비디오 프레임들(510, 520, 530, 540)만이 표시되어 있을 뿐, 더 많은 비디오 프레임들이 입력 동영상에 포함되어 있을 수 있다.
상단부 블록(500)은 중앙의 점선을 기준으로 두 개의 구간으로 분할된다. 점선 좌측 구간에는 비디오 프레임들(510, 520)이 포함된다. 점선 우측 구간에는 비디오 프레임(530, 540)이 포함된다. 각 구간마다 하나의 대표 비디오 프레임이 결정된다.
가장 좌측의 비디오 프레임(510)이 표시될 때, ‘안녕’이라는 음성이 검출된다. 비디오 프레임(520)이 표시될 때, ‘잘 지내?’라는 음성이 검출된다. 비디오 프레임(530)이 표시될 때, ‘그럭저럭’이라는 음성이 검출된다. 비디오 프레임(540)이 표시될 대, ‘너는?’이라는 음성이 검출된다.
슬라이드 동영상은 대표 비디오 프레임에 대응되는 구간에서 검출된 음성을 인식하여, 인식된 음성에 해당하는 텍스트를 대표 비디오 프레임과 함께 표시할 수 있다. 예를 들어 대표 비디오 프레임(560)에는 비디오 프레임(510, 520)에서 검출된 음성을 조합한 ‘안녕, 잘 지내?’라는 텍스트(565)가 하단부에 표시되어 있다. 대표 비디오 프레임(570)에는 비디오 프레임(530, 540)에서 검출된 음성을 조합한 ‘그럭저럭, 너는?’ 라는 텍스트(575)가 하단부에 표시되어 있다.
도 5에서는 대표 비디오 프레임의 하단부에 검출된 음성이 표시되어 있지만, 실시 예에 따라 다른 부분에 표시가 될 수도 있다.
만약 입력 동영상과 함께, 입력 동영상의 오디오에 대한 텍스트 정보가 획득된다면, 검출된 음성을 인식하는 대신 텍스트 정보에서 검출된 음성에 대응되는 텍스트를 추출하여 표시할 수 있다.
도 6 은 동영상 처리 방법(600)의 일 실시예의 흐름도이다
단계 610에서는 복수의 비디오 프레임들 및 오디오로 구성된 입력 동영상이 획득된다. 입력 동영상과 더불어 입력 동영상의 프레임들에 대한 시청자 선호도 정보가 획득될 수도 있다. 또한 입력 동영상에 대한 텍스트 정보가 획득될 수도 있다
단계 620에서는 입력 동영상이 적어도 하나의 구간으로 분할된다. 입력 동영상은 각 구간의 길이가 일정하도록 분할될 수 있다.
단계 630에서는 적어도 하나의 구간 각각에 대하여, 구간에 포함된 비디오 프레임들 중 대표 비디오 프레임이 결정된다. 만약 입력 동영상에 포함된 프레임들에 대한 시청자들의 반응이 포함된 시청자 선호도 정보가 입력 동영상과 함께 제공되는 경우, 시청자 선호도 정보에 기초하여 대표 비디오 프레임이 결정될 수 있다.
또한 대표 비디오 프레임은 오디오 및 비디오 프레임들 중 적어도 하나의 분석에 기초하여 결정될 수 있다. 예를 들어 특정한 소리가 오디오로부터 검출된 경우, 특정한 소리가 재생되는 위치에 기초하여 대표 비디오 프레임으로 결정될 수 있다. 또 다른 예로 입력 동영상에서 제공되는 특정 객체가 비디오 프레임에 포함되어 있는 경우, 비디오 프레임이 대표 비디오 프레임으로 결정될 수 있다.
단계 640에서는 대표 비디오 프레임들 각각이 오디오에 동기화되어, 대표 비디오 프레임에 대응되는 구간의 재생 시간만큼 표시되는 슬라이드 동영상이 획득된다.
도 7 은 슬라이드 동영상 파일의 구성을 설명하기 위한 도면이다.
도 2 의 저장부(230)에는 슬라이드 동영상(718)과 슬라이드 동영상에 포함되는 대표 비디오 프레임의 이미지(710), 오디오(714)가 저장될 수 있다. 또한 슬라이드 동영상(718)의 원본인 입력 동영상(712)이 저장될 수 있다.
대표 비디오 프레임의 이미지(710)는 jpg, gif등으로 압축되어 저장될 수 있다. 대표 비디오 프레임의 이미지(710)의 파일명은 슬라이드 동영상(718)의 파일명에 관련되도록 결정될 수 있다. 도 7에 따르면, A.PLT(750)로 슬라이드 동영상(718)의 파일명이 결정된 경우, 대표 비디오 프레임의 표시 순서에 따라, A_001.jpg, A_002.jpg … (734)와 같이 대표 비디오 프레임의 이미지(710)의 파일명이 결정될 수 있다.
입력 동영상에 포함된 오디오(714)는 wav, mp3, wma 와 같은 확장자를 가진 오디오 파일로 저장될 수 있다. 오디오(714)의 파일명은 슬라이드 동영상(718)의 파일명에 관련되도록 결정될 수 있다. 도 7에 따르면, A.PLT(750)로 슬라이드 동영상(718)의 파일명이 결정된 경우, 대표 비디오 프레임의 표시 순서에 따라, A.wav (744)와 같이 오디오(714)의 파일명이 결정될 수 있다.
슬라이드 동영상(718)은 임의의 확장자를 가진 파일로 저장될 수 있다. 예를 들어 슬라이드 동영상 파일은 도 7에서와 같이 PLT라는 확장자를 가질 수 있다. 슬라이드 동영상 파일은 대표 비디오 프레임 및 오디오에 관한 데이터를 포함할 수 있다. 따라서 슬라이드 동영상 파일은 슬라이드 동영상에 관한 별도의 대표 비디오 프레임의 이미지 및 오디오에 관한 파일 없이 독립적으로 재생될 수 있다.
반대로 슬라이드 동영상 파일은 대표 비디오 프레임 및 오디오에 관한 데이터 대신 대표 비디오 프레임 및 오디오에 관한 데이터가 저장된 위치에 관한 정보를 포함할 수도 있다. 예를 들어, A.PLT(750)은 A_001.jpg, A_002.jpg … (734) 및 A.wav (744)의 위치 정보를 포함할 수 있다.
위에서 언급된 이미지(710), 오디오(714) 및 슬라이드 동영상(718)은 반드시 동일한 저장 장치에 저장될 필요는 없으며, 분산되어 저장될 수도 있다.
도 8a 내지 8d는 슬라이드 동영상 생성 및 재생 기능을 가진 프로그램의 일 실시 예를 설명하기 위한 도면이다.
도 8a는 슬라이드 동영상 생성 기능을 활성화하는 애플리케이션의 표시 화면(800)을 도시한 도면이다. 애플리케이션의 표시 화면에는 슬라이드 동영상 녹화(802)와 기본 녹화 장치(804)가 표시되어 있다. 슬라이드 동영상 녹화(802)가 선택되면, 슬라이드 동영상 생성 기능을 활성화하는 애플리케이션을 디스플레이에 표시할지 여부를 결정할 수 있다. 슬라이드 동영상 녹화(802)가 on에 표시되면, 기본 녹화 장치(804)를 선택할 수 있다. 기본 녹화 장치(804)가 선택되면, 어떤 장치에서 슬라이드 동영상 생성 기능을 실행할지 결정할 수 있다.
도 8b는 동영상이 재생되는 디스플레이(820)를 도시한 도면이다. 동영상 처리 장치의 사용자는 디스플레이(820)의 상단부에 표시된 녹화시작(822) 버튼을 선택하여, 디스플레이 상에 재생되는 동영상을 입력 동영상으로 하여, 슬라이드 동영상을 생성할 수 있다. 또한 사용자는 디스플레이(820)의 상단부에 표시된 컨텐츠 탐색(824) 버튼을 선택하여, 이미 생성된 슬라이드 동영상을 탐색할 수 있다.
도 8c는 슬라이드 동영상이 생성되는 디스플레이(840)을 도시한 도면이다. 동영상 처리 장치의 사용자는 디스플레이(840)의 상단부에 표시된 녹화중지(842) 버튼을 선택하여, 슬라이드 동영상의 생성을 정지할 수 있다. 또한 사용자는 디스플레이(840)의 상단부에 표시된 컨텐츠 탐색(844) 버튼을 선택하여, 슬라이드 동영상 생성 중에도 이미 생성된 슬라이드 동영상을 탐색할 수 있다. 슬라이드 동영상이 생성되는 경우, 녹화중(846)이라는 표시가 입력 동영상의 상단부에 표시될 수 있다. 또한 생성된 슬라이드 동영상의 재생 시간 역시 표시될 수 있다.
도 8d는 컨텐츠 탐색 기능을 가진 어플리케이션의 실행 화면(860)을 도시한 도면이다. 실행 화면(860)에는 슬라이드 동영상 파일들(864)에 대한 이미지 및 오디오 파일들이 포함된 폴더(862), 슬라이드 동영상 파일들(864) 및 선택된 컨텐츠의 정보(866)가 표시된다. 선택된 컨텐츠의 정보(866)에는 입력 동영상의 생산자, 재생 길이, 인코딩 방식 등에 대한 메타 데이터가 포함될 수 있다. 사용자는 어플리케이션을 이용하여 슬라이드 동영상 파일, 슬라이드 동영상 파일에 대한 이미지 또는 오디오를 탐색할 수 있다.
한편, 상술한 본 발명의 일 실시예에 따른 동영상 처리 방법은 컴퓨터에서 실행될 수 있는 프로그램으로 작성가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 상기 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬, 플로피 디스크, 하드 디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등)와 같은 저장매체를 포함한다.
이제까지 본 발명에 대하여 그 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (15)

  1. 동영상을 처리하는 방법에 있어서,
    복수의 비디오 프레임들 및 오디오로 구성된 입력 동영상을 획득하는 단계;
    상기 입력 동영상을 적어도 하나의 구간으로 분할하는 단계;
    상기 적어도 하나의 구간 각각에 대하여, 상기 구간에 포함된 상기 비디오 프레임들 중 대표 비디오 프레임을 결정하는 단계; 및
    상기 대표 비디오 프레임들 각각이 상기 오디오에 동기화되어, 상기 대표 비디오 프레임에 대응되는 상기 구간의 재생 시간만큼 표시되는 슬라이드 동영상을 획득하는 단계를 포함하는 동영상 처리 방법.
  2. 제1항에 있어서,
    상기 입력 동영상을 분할하는 단계는, 상기 구간의 길이가 일정하도록 상기 입력 동영상을 분할하는 것을 특징으로 하는 동영상 처리 방법.
  3. 제1항에 있어서,
    상기 대표 비디오 프레임을 결정하는 단계는, 상기 입력 동영상에 포함된 비디오 프레임들에 대한 시청자들의 반응이 포함된 시청자 선호도 정보가 상기 입력 동영상과 함께 제공되는 경우, 상기 시청자 선호도 정보에 기초하여 상기 대표 비디오 프레임을 결정하는 것을 특징으로 하는 동영상 처리 방법.
  4. 제1항에 있어서,
    상기 대표 비디오 프레임을 결정하는 단계는, 상기 오디오 및 상기 비디오 프레임들 중 적어도 하나의 분석에 기초하여 상기 대표 비디오 프레임을 결정하는 것을 특징으로 하는 동영상 처리 방법.
  5. 제4 항에 있어서,
    상기 대표 비디오 프레임을 결정하는 단계는, 특정한 소리가 상기 오디오로부터 검출된 경우, 상기 특정한 소리가 재생되는 위치에 기초하여 대표 비디오 프레임으로 결정하는 것을 특징으로 하는 동영상 처리 방법.
  6. 제4항에 있어서,
    상기 대표 비디오 프레임을 결정하는 단계는, 상기 입력 동영상에서 제공되는 특정 객체가 상기 비디오 프레임에 포함되어 있는 경우, 상기 비디오 프레임을 대표 비디오 프레임으로 결정하는 것을 특징으로 하는 동영상 처리 방법.
  7. 제 1 항에 있어서,
    상기 입력 동영상에 부속되는 텍스트 정보가 제공되는 경우, 상기 대표 비디오 프레임에 대응되는 대표 텍스트를 추출하는 단계를 더 포함하고,
    상기 슬라이드 동영상을 획득하는 단계는, 상기 대표 비디오 프레임에 상기 대표 비디오 프레임과 대응되는 상기 대표 텍스트가 포함된 상기 슬라이드 동영상을 획득하는 것을 특징으로 하는 동영상 처리 방법.
  8. 영상을 처리하는 장치에 있어서,
    복수의 비디오 프레임들 및 오디오로 구성된 입력 동영상을 수신하는 입력부; 및
    상기 입력 동영상을 적어도 하나의 구간으로 분할하고,
    상기 적어도 하나의 구간 각각에 대하여, 상기 구간에 포함된 상기 비디오 프레임들 중 대표 비디오 프레임을 결정하며,
    상기 대표 비디오 프레임들 각각이 상기 오디오에 동기화되어, 상기 대표 비디오 프레임에 대응되는 상기 구간의 재생 시간만큼 표시되는 슬라이드 동영상을 획득하는 동영상 처리부를 포함하는 동영상 처리 장치.
  9. 제8항에 있어서,
    상기 동영상 처리부는, 상기 구간의 길이가 일정하도록 상기 입력 동영상을 분할하는 것을 특징으로 하는 동영상 처리 장치.
  10. 제8항에 있어서,
    상기 동영상 처리부는, 상기 입력 동영상에 포함된 프레임들에 대한 시청자들의 반응이 포함된 시청자 선호도 정보가 상기 입력 동영상과 함께 제공되는 경우, 상기 시청자 선호도 정보에 기초하여 상기 대표 비디오 프레임을 결정하는 것을 특징으로 하는 동영상 처리 장치.
  11. 제8항에 있어서,
    상기 동영상 처리부는, 상기 오디오 및 상기 비디오 프레임들 중 적어도 하나의 분석에 기초하여 상기 대표 비디오 프레임을 결정하는 것을 특징으로 하는 동영상 처리 장치.
  12. 제 11 항에 있어서,
    상기 동영상 처리부는, 특정한 소리가 상기 오디오로부터 검출된 경우, 상기 특정한 소리가 재생되는 위치에 기초하여 대표 비디오 프레임으로 결정하는 것을 특징으로 하는 동영상 처리 장치.
  13. 제 11항에 있어서,
    상기 동영상 처리부는, 상기 입력 동영상에서 제공되는 특정 객체가 상기 비디오 프레임에 포함되어 있는 경우, 상기 비디오 프레임을 대표 비디오 프레임으로 결정하는 것을 특징으로 하는 동영상 처리 장치.
  14. 제 8항에 있어서,
    상기 입력부는, 상기 입력 동영상에 부속되는 텍스트 정보가 제공되는 경우, 상기 텍스트 정보를 획득하고,
    상기 동영상 처리부는, 상기 텍스트 정보에서 상기 대표 비디오 프레임에 대응되는 대표 텍스트를 추출하고,
    상기 대표 비디오 프레임에 상기 대표 비디오 프레임과 대응되는 상기 대표 텍스트가 포함된 상기 슬라이드 동영상을 획득하는 것을 특징으로 하는 동영상 처리 장치.
  15. 제 1 항 내지 제 7 항 중 어느 한 항의 영상 표시 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록매체.
KR1020140140171A 2014-10-16 2014-10-16 동영상 처리 장치 및 방법 KR102340196B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020140140171A KR102340196B1 (ko) 2014-10-16 2014-10-16 동영상 처리 장치 및 방법
CN201580042171.3A CN106576151B (zh) 2014-10-16 2015-06-17 视频处理装置和方法
US15/324,019 US10014029B2 (en) 2014-10-16 2015-06-17 Video processing apparatus and method
EP15850379.7A EP3143764A4 (en) 2014-10-16 2015-06-17 Video processing apparatus and method
PCT/KR2015/006112 WO2016060358A1 (en) 2014-10-16 2015-06-17 Video processing apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140140171A KR102340196B1 (ko) 2014-10-16 2014-10-16 동영상 처리 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20160044981A true KR20160044981A (ko) 2016-04-26
KR102340196B1 KR102340196B1 (ko) 2021-12-16

Family

ID=55746867

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140140171A KR102340196B1 (ko) 2014-10-16 2014-10-16 동영상 처리 장치 및 방법

Country Status (5)

Country Link
US (1) US10014029B2 (ko)
EP (1) EP3143764A4 (ko)
KR (1) KR102340196B1 (ko)
CN (1) CN106576151B (ko)
WO (1) WO2016060358A1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190129266A (ko) * 2018-05-10 2019-11-20 네이버 주식회사 컨텐츠 제공 서버, 컨텐츠 제공 단말 및 컨텐츠 제공 방법
WO2020085675A1 (ko) * 2018-10-24 2020-04-30 네이버 주식회사 컨텐츠 제공 서버, 컨텐츠 제공 단말 및 컨텐츠 제공 방법
WO2020091249A1 (ko) * 2018-10-31 2020-05-07 네이버 주식회사 컨텐츠 제공 서버, 컨텐츠 제공 단말 및 컨텐츠 제공 방법
CN114173177A (zh) * 2021-12-03 2022-03-11 北京百度网讯科技有限公司 一种视频处理方法、装置、设备及存储介质

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102414783B1 (ko) * 2017-11-01 2022-06-30 삼성전자주식회사 전자 장치 및 이의 제어방법
CN108174269B (zh) * 2017-12-28 2021-02-26 阿里巴巴（中国）有限公司 可视化音频播放方法及装置
CN109819346A (zh) * 2019-03-13 2019-05-28 联想(北京)有限公司 视频文件处理方法及装置、计算机系统和可读存储介质
CN110602525B (zh) * 2019-08-23 2021-09-17 江西憶源多媒体科技有限公司 一种视频分析结果与图像帧绑定传输的方法
CN110534085B (zh) * 2019-08-29 2022-02-25 北京百度网讯科技有限公司 用于生成信息的方法和装置
CN111741359A (zh) * 2020-05-28 2020-10-02 杨伟 一种视频转pptx的方法及系统
US11804245B2 (en) * 2022-01-21 2023-10-31 Kyndryl, Inc. Video data size reduction

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010007174A (ko) * 1999-06-07 2001-01-26 이데이 노부유끼 동화상 기록재생 장치및 방법,및 매체
US6342904B1 (en) * 1998-12-17 2002-01-29 Newstakes, Inc. Creating a slide presentation from full motion video
KR20090131196A (ko) * 2008-06-17 2009-12-28 삼성전자주식회사 미디어 파일 재생 방법 및 장치
KR20120029479A (ko) * 2009-08-20 2012-03-26 후지쯔 가부시끼가이샤 동화상 처리 장치, 섬네일 화상 생성 프로그램을 저장한 매체 및 섬네일 화상 생성 방법

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1998034182A2 (en) 1997-02-03 1998-08-06 Koninklijke Philips Electronics N.V. A method and device for navigating through video matter by means of displaying a plurality of key-frames in parallel
US6804295B1 (en) * 2000-01-07 2004-10-12 International Business Machines Corporation Conversion of video and audio to a streaming slide show
US7143352B2 (en) * 2002-11-01 2006-11-28 Mitsubishi Electric Research Laboratories, Inc Blind summarization of video content
US7131059B2 (en) * 2002-12-31 2006-10-31 Hewlett-Packard Development Company, L.P. Scalably presenting a collection of media objects
US7212666B2 (en) * 2003-04-01 2007-05-01 Microsoft Corporation Generating visually representative video thumbnails
US20070154164A1 (en) 2005-01-12 2007-07-05 Liu Samson J Converting a still image in a slide show to a plurality of video frame images
JP2009528756A (ja) * 2006-03-03 2009-08-06 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 複数の画像の要約の自動生成のための方法及び装置
US8615573B1 (en) 2006-06-30 2013-12-24 Quiro Holdings, Inc. System and method for networked PVR storage and content capture
WO2008113064A1 (en) * 2007-03-15 2008-09-18 Vubotics, Inc. Methods and systems for converting video content and information to a sequenced media delivery format
US8503523B2 (en) * 2007-06-29 2013-08-06 Microsoft Corporation Forming a representation of a video item and use thereof
US20090150784A1 (en) 2007-12-07 2009-06-11 Microsoft Corporation User interface for previewing video items
US20090209237A1 (en) * 2007-12-11 2009-08-20 Scirocco Michelle Six Apparatus And Method For Slideshows, Thumbpapers, And Cliptones On A Mobile Phone
US20090196574A1 (en) * 2008-02-06 2009-08-06 Lidestri James M Still Image Promotion
CN101398855B (zh) * 2008-10-24 2010-08-11 清华大学 一种视频关键帧提取方法和系统
KR20120040816A (ko) * 2010-10-20 2012-04-30 삼성전자주식회사 파일 통합 운용 방법 및 이를 지원하는 휴대 단말기
CN102611910B (zh) * 2011-01-19 2014-04-16 北京东方文骏软件科技有限责任公司 基于关键帧图像质量加权的无参考视频质量客观评价方法
CN102184221B (zh) * 2011-05-06 2012-12-19 北京航空航天大学 一种基于用户偏好的实时视频摘要生成方法
KR101205388B1 (ko) * 2011-05-13 2012-11-27 한국과학기술원 강의 동영상과 강의노트 동기화를 통해 동영상 프레임을 슬라이드 주요 제목으로 색인하는 방법
CN102332001B (zh) * 2011-07-26 2013-06-26 深圳万兴信息科技股份有限公司 一种视频缩略图生成方法及装置
US8995307B2 (en) * 2012-06-18 2015-03-31 Cisco Technology, Inc. Multicast media notification for queued calls
KR101541495B1 (ko) 2012-08-17 2015-08-05 네이버 주식회사 캡쳐된 이미지를 이용한 동영상 분석 장치, 방법 및 컴퓨터 판독 가능한 기록 매체

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6342904B1 (en) * 1998-12-17 2002-01-29 Newstakes, Inc. Creating a slide presentation from full motion video
KR20010007174A (ko) * 1999-06-07 2001-01-26 이데이 노부유끼 동화상 기록재생 장치및 방법,및 매체
KR20090131196A (ko) * 2008-06-17 2009-12-28 삼성전자주식회사 미디어 파일 재생 방법 및 장치
KR20120029479A (ko) * 2009-08-20 2012-03-26 후지쯔 가부시끼가이샤 동화상 처리 장치, 섬네일 화상 생성 프로그램을 저장한 매체 및 섬네일 화상 생성 방법

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190129266A (ko) * 2018-05-10 2019-11-20 네이버 주식회사 컨텐츠 제공 서버, 컨텐츠 제공 단말 및 컨텐츠 제공 방법
US11350178B2 (en) 2018-05-10 2022-05-31 Naver Corporation Content providing server, content providing terminal and content providing method
WO2020085675A1 (ko) * 2018-10-24 2020-04-30 네이버 주식회사 컨텐츠 제공 서버, 컨텐츠 제공 단말 및 컨텐츠 제공 방법
KR20200046327A (ko) * 2018-10-24 2020-05-07 네이버 주식회사 컨텐츠 제공 서버, 컨텐츠 제공 단말 및 컨텐츠 제공 방법
US11496806B2 (en) 2018-10-24 2022-11-08 Naver Corporation Content providing server, content providing terminal, and content providing method
WO2020091249A1 (ko) * 2018-10-31 2020-05-07 네이버 주식회사 컨텐츠 제공 서버, 컨텐츠 제공 단말 및 컨텐츠 제공 방법
US11899716B2 (en) 2018-10-31 2024-02-13 Naver Corporation Content providing server, content providing terminal, and content providing method
CN114173177A (zh) * 2021-12-03 2022-03-11 北京百度网讯科技有限公司 一种视频处理方法、装置、设备及存储介质
CN114173177B (zh) * 2021-12-03 2024-03-19 北京百度网讯科技有限公司 一种视频处理方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN106576151B (zh) 2021-06-15
EP3143764A4 (en) 2017-12-27
CN106576151A (zh) 2017-04-19
US20170206929A1 (en) 2017-07-20
KR102340196B1 (ko) 2021-12-16
US10014029B2 (en) 2018-07-03
WO2016060358A1 (en) 2016-04-21
EP3143764A1 (en) 2017-03-22

Similar Documents

Publication Publication Date Title
KR102340196B1 (ko) 동영상 처리 장치 및 방법
TWI259719B (en) Apparatus and method for reproducing summary
TWI317937B (en) Storage medium including metadata and reproduction apparatus and method therefor
EP2136370B1 (en) Systems and methods for identifying scenes in a video to be edited and for performing playback
US9558784B1 (en) Intelligent video navigation techniques
US9564177B1 (en) Intelligent video navigation techniques
KR101268987B1 (ko) 메타데이터를 자동적으로 생성/갱신하는 멀티미디어 데이터기록 방법 및 장치
KR101440168B1 (ko) 개요 및 리포트를 이미 포함하는 시청각 도큐먼트의 새로운 개요를 생성하기 위한 방법 및 상기 방법을 구현할 수 있는 수신기
CN104065908B (zh) 用于创建和再现生动图片文件的设备和方法
RU2315370C2 (ru) Носитель данных, на котором записаны аудиовизуальные данные с информацией о событии, устройство воспроизведения и способ их воспроизведения
JP2006340066A (ja) 動画像符号化装置、動画像符号化方法及び記録再生方法
KR20050012101A (ko) 시나리오를 기록한 정보저장매체, 기록장치 및 기록방법,그 정보저장매체의 재생장치 및 시나리오의 검색방법
KR102220088B1 (ko) 오디오 또는 비디오에서 인터컷 시간 버킷을 결정하는 방법 및 디바이스
KR20080082149A (ko) 텍스트 기반 자막 변경 방법 및 장치
KR100758304B1 (ko) 다시점 파노라믹 비디오 콘텐츠의 제작방법 및 이에 따른콘텐츠의 재생방법
WO2009044351A1 (en) Generation of image data summarizing a sequence of video frames
KR101477492B1 (ko) 동영상 콘텐츠 편집 및 재생을 위한 장치 및 그 방법
US20120272152A1 (en) Method for adding a voice content to a video content and device implementing the method
US20160127807A1 (en) Dynamically determined audiovisual content guidebook
KR20080064364A (ko) 장면 검색 방법 및 장치
KR101648711B1 (ko) 스크립트를 기반으로 하는 동영상 부가정보 처리 장치 및방법
KR20080084303A (ko) 멀티미디어 파일에서 원하는 부분만 쉽고 빠르게 정확히 추출하여 u-컨텐츠 만드는 방법
JP2006332765A (ja) コンテンツ検索・再生方法、コンテンツ検索・再生装置、並びにプログラムおよび記録媒体
JP2007201815A (ja) 表示装置、再生装置、方法、及びプログラム
JP5132789B2 (ja) 動画像符号化装置及び方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant