KR20160081043A - Method, server and system for controlling play speed of video - Google Patents

Method, server and system for controlling play speed of video Download PDF

Info

Publication number
KR20160081043A
KR20160081043A KR1020140194210A KR20140194210A KR20160081043A KR 20160081043 A KR20160081043 A KR 20160081043A KR 1020140194210 A KR1020140194210 A KR 1020140194210A KR 20140194210 A KR20140194210 A KR 20140194210A KR 20160081043 A KR20160081043 A KR 20160081043A
Authority
KR
South Korea
Prior art keywords
scene
playback speed
video
importance
server
Prior art date
Application number
KR1020140194210A
Other languages
Korean (ko)
Inventor
권재철
김종성
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Priority to KR1020140194210A priority Critical patent/KR20160081043A/en
Publication of KR20160081043A publication Critical patent/KR20160081043A/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2387Stream processing in response to a playback request from an end-user, e.g. for trick-play
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242Synchronization processes, e.g. processing of PCR [Program Clock References]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637Control signals issued by the client directed to the server or network components
    • H04N21/6377Control signals issued by the client directed to the server or network components directed to server

Abstract

A method for adjusting a video reproduction speed comprises the following steps of: generating a scene including a plurality of shots from a video; analyzing and storing scene information of the scene; collecting a reproduction speed adjusting history of a user terminal; determining a reproduction speed adjusting tendency of the user terminal from the reproduction speed adjusting history; and adjusting a reproduction speed of the video of the user terminal based on the scene information and the reproduction speed adjusting tendency.

Description

비디오 재생 속도 조절 방법, 서버 및 시스템 {METHOD, SERVER AND SYSTEM FOR CONTROLLING PLAY SPEED OF VIDEO}METHOD, SERVER AND SYSTEM FOR CONTROLLING PLAY SPEED OF VIDEO,

본 발명은 비디오 재생 속도 조절 방법, 서버 및 시스템에 관한 것이다.The present invention relates to a video reproduction rate control method, a server and a system.

IPTV나 케이블TV, OTT(Over The Top) 미디어 사업자들은 대부분 영화나 TV 드라마 다시보기 같은 VOD 서비스를 제공한다. 이러한 콘텐츠를 시청할 때 시청자들의 시청패턴은 제각각이다. 처음부터 끝까지 정속도로 시청하는 콘텐츠가 있을 수 있고, 흥미없는 부분은 2배속이나 4배속 등 빨리 재생해서 넘어가길 원하는 콘텐츠도 있다. 특히 드라마 같은 뻔한 스토리의 콘텐츠는 주말에 몇 회차를 한꺼번에 몰아서 보는 경우도 많은데 이 경우 모든 회차를 정속도로 시청하는 사람은 거의 없을 것이다. 대부분은 리모컨으로 빨리감기 기능을 이용하거나 썸네일 기능을 이용하여 건너뛰기 하면서 줄거리를 파악할 것이다.Most IPTV, cable TV, and OTT (Over The Top) media providers offer VOD services such as watching movies and TV dramas. The viewing patterns of viewers are different when watching such contents. There may be content to watch at constant speed from the beginning to the end, and some contents that are not interesting are to be played back quickly such as 2x or 4x. In particular, there are many cases in which the content of the obvious story such as a drama is driven a few times at a time on the weekend, but in this case, few people will watch all the time at a constant speed. Most will use the fast forward function with the remote control or use the thumbnail function to skip over the plot.

이러한 시청자들의 요구를 반영하여 종래에 다양한 재생 속도 조절 기술 및 비디오 요약 기술들이 개시되어 있으며, 선행기술인 한국공개특허 제 2002-0026099호는 비디오의 지능형 빨리 보기 시스템에 관한 것으로, 비디오 화면의 모션, 샷, 얼굴검출, 텍스트, 오디오 정보들을 이용하여 화면의 내용 복잡도를 산출하고, 산출된 내용 복잡도를 기초로 지능형 빨리보기를 위한 인덱싱 정보를 생성하고, 생성된 인덱싱 정보를 이용하여 구간별 재생속도를 적응적으로 제어하는 구성을 개시하고 있다.A variety of playback speed adjustment techniques and video summarization techniques have been disclosed in the past to reflect the needs of such viewers. Korean Unexamined Patent Publication No. 2002-0026099, which is related to an intelligent quick view system for video, , The face detection, text, and audio information, and generates indexing information for intelligent quick viewing based on the calculated content complexity, adapts the playback speed for each section using the generated indexing information And the control is effected on the basis of the control signal.

사용자 단말의 재생 속도 조절 이력을 기초로 사용자의 재생 속도 조절 성향을 판단하고, 사용자의 성향에 기초하여 비디오의 재생 속도를 자동으로 조절할 수 있는 비디오 재생 속도 조절 방법, 서버 및 시스템을 제공하고자 한다. 비디오의 장면을 분석하여 장면의 중요도를 판단하고, 장면의 중요도에 따라 재생 속도를 조절할 수 있는 비디오 재생 속도 조절 방법, 서버 및 시스템을 제공하고자 한다. Server, and system capable of automatically determining a playback speed control tendency of a user based on a playback speed adjustment history of a user terminal and automatically adjusting a playback speed of the video based on a user's tendency. A video playback speed control method, a server, and a system capable of analyzing a scene of a video to determine the importance of the scene and controlling the playback speed according to the importance of the scene.

상술한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 일 실시예는 비디오의 재생 속도를 조절하는 방법에 있어서, 비디오로부터 복수의 샷을 포함하는 장면을 생성하는 단계, 상기 장면의 장면 정보를 분석하여 저장하는 단계, 사용자 단말의 재생 속도 조절 이력을 수집하는 단계, 상기 재생 속도 조절 이력으로부터 상기 사용자 단말의 재생 속도 조절 성향을 판단하는 단계 및 상기 장면 정보와 상기 재생 속도 조절 성향을 기초로 상기 사용자 단말에서의 상기 비디오의 재생 속도를 조절하는 단계를 포함하는 재생 속도 조절 방법을 제공할 수 있다.According to an aspect of the present invention, there is provided a method of adjusting a playback speed of a video, the method comprising: generating a scene including a plurality of shots from a video; Analyzing and storing the playback speed control history of the user terminal, collecting the playback speed control history of the user terminal, determining the playback speed control tendency of the user terminal from the playback speed control history, And adjusting the playback speed of the video in the user terminal.

또한, 본 발명의 다른 실시예는, 비디오의 재생 속도를 조절하는 서버에 있어서, 비디오로부터 복수의 샷을 포함하는 장면을 생성하는 장면 생성부, 상기 장면의 장면 정보를 분석하는 장면 분석부, 상기 장면 정보를 저장하는 장면 데이터베이스, 사용자 단말의 재생 속도 조절 이력을 수집하는 이력 수집부, 상기 재생 속도 조절 이력으로부터 상기 사용자 단말의 재생 속도 조절 성향을 판단하는 성향 판단부 및 상기 장면 정보와 상기 재생 속도 조절 성향을 기초로 상기 사용자 단말에서의 상기 비디오의 재생 속도를 조절하는 재생 속도 제어부를 포함하는 서버를 제공할 수 있다. According to another embodiment of the present invention, there is provided a server for controlling a playback speed of a video, comprising: a scene generation unit for generating a scene including a plurality of shots from video; a scene analyzing unit for analyzing scene information of the scene; A history acquisition unit for acquiring a playback speed adjustment history of the user terminal, a tendency determination unit for determining a tendency of the user terminal to adjust the playback speed from the playback speed adjustment history, And a playback speed controller for adjusting the playback speed of the video in the user terminal based on the control tendency.

또한, 본 발명의 또 다른 실시예는, 비디오의 재생 속도를 조절하는 시스템에 있어서, 콘텐츠 제공 서버, 재생 속도 조절 서버, VOD 서버 및 단말을 포함하고, 상기 재생 속도 조절 서버는 상기 비디오로부터 복수의 샷을 포함하는 장면을 생성하고, 상기 장면의 장면의 장면 정보를 분석하여 저장하고, 사용자 단말의 재생 속도 조절 이력을 수집하고, 상기 재생 속도 조절 이력으로부터 상기 사용자 단말의 재생 속도 조절 성향을 판단하고, 상기 장면 정보와 상기 재생 속도 조절 성향을 기초로 상기 사용자 단말에서의 상기 비디오의 재생 속도를 조절하는 것인, 시스템을 제공할 수 있다. According to another embodiment of the present invention, there is provided a system for controlling a playback speed of a video, the system comprising a content providing server, a playback speed adjustment server, a VOD server, and a terminal, The method includes generating a scene including a shot, analyzing and storing scene information of a scene of the scene, collecting a playback speed adjustment history of the user terminal, determining a playback speed adjustment tendency of the user terminal from the playback speed adjustment history And adjusts the playback speed of the video at the user terminal based on the scene information and the playback speed control propensity.

상술한 과제 해결 수단은 단지 예시적인 것으로서, 본 발명을 제한하려는 의도로 해석되지 않아야 한다. 상술한 예시적인 실시예 외에도, 도면 및 발명의 상세한 설명에 기재된 추가적인 실시예가 존재할 수 있다.The above-described task solution is merely exemplary and should not be construed as limiting the present invention. In addition to the exemplary embodiments described above, there may be additional embodiments described in the drawings and the detailed description of the invention.

전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, 사용자 단말의 재생 속도 조절 이력을 기초로 사용자의 재생 속도 조절 성향을 판단하고, 사용자의 성향에 기초하여 비디오의 재생 속도를 자동으로 조절 할 수 있는 비디오 재생 속도 조절 방법, 서버 및 시스템을 제공할 수 있다. 비디오의 장면을 분석하여 장면의 중요도를 판단하고, 장면의 중요도에 따라 재생 속도를 조절할 수 있는 비디오 재생 속도 조절 방법, 서버 및 시스템을 제공할 수 있다.According to any one of the above-mentioned objects of the present invention, the playback speed control tendency of the user is determined based on the playback speed adjustment history of the user terminal, and the playback speed of the video is automatically adjusted based on the user's preference A video playback rate control method, a server and a system. A video playback speed control method, a server, and a system capable of analyzing a scene of a video to determine the importance of the scene and controlling the playback speed according to the importance of the scene.

도 1은 본 발명의 일 실시예에 따른 재생 속도 조절 시스템의 구성도이다.
도 2는 본 발명의 일 실시예에 따른 재생 속도 조절 서버의 구성도이다.
도 3은 본 발명의 일 실시예에 따른 장면분석부의 구성도이다.
도 4는 본 발명의 일 실시예에 따른 재생 속도 조절 서버에서 재생 속도를 조절 과정을 나타낸 흐름도이다.
도 5는 본 발명의 일 실시예에 따른 장면의 중요도 할당 방법의 예시를 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시예에 따른 재생 속도의 조절 방법의 예시를 설명하기 위한 도면이다.
FIG. 1 is a configuration diagram of a playback speed control system according to an embodiment of the present invention.
2 is a configuration diagram of a playback speed control server according to an embodiment of the present invention.
3 is a configuration diagram of a scene analyzing unit according to an embodiment of the present invention.
4 is a flowchart illustrating a process of adjusting a playback speed in a playback speed control server according to an embodiment of the present invention.
FIG. 5 is a view for explaining an example of a scene importance assignment method according to an embodiment of the present invention.
FIG. 6 is a view for explaining an example of a method of adjusting a reproduction speed according to an embodiment of the present invention.

아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다. Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings, which will be readily apparent to those skilled in the art. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein. In order to clearly illustrate the present invention, parts not related to the description are omitted, and similar parts are denoted by like reference characters throughout the specification.

명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미하며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다. Throughout the specification, when a part is referred to as being "connected" to another part, it includes not only "directly connected" but also "electrically connected" with another part in between . Also, when an element is referred to as "including" an element, it is to be understood that the element may include other elements as well as other elements, And does not preclude the presence or addition of one or more other features, integers, steps, operations, components, parts, or combinations thereof.

본 명세서에 있어서 '부(部)'란, 하드웨어에 의해 실현되는 유닛(unit), 소프트웨어에 의해 실현되는 유닛, 양방을 이용하여 실현되는 유닛을 포함한다. 또한, 1 개의 유닛이 2 개 이상의 하드웨어를 이용하여 실현되어도 되고, 2 개 이상의 유닛이 1 개의 하드웨어에 의해 실현되어도 된다.In this specification, the term " part " includes a unit realized by hardware, a unit realized by software, and a unit realized by using both. Further, one unit may be implemented using two or more hardware, or two or more units may be implemented by one hardware.

본 명세서에 있어서 단말 또는 디바이스가 수행하는 것으로 기술된 동작이나 기능 중 일부는 해당 단말 또는 디바이스와 연결된 서버에서 대신 수행될 수도 있다. 이와 마찬가지로, 서버가 수행하는 것으로 기술된 동작이나 기능 중 일부도 해당 서버와 연결된 단말 또는 디바이스에서 수행될 수도 있다.In this specification, some of the operations or functions described as being performed by the terminal or the device may be performed in the server connected to the terminal or the device instead. Similarly, some of the operations or functions described as being performed by the server may also be performed on a terminal or device connected to the server.

이하 첨부된 도면을 참고하여 본 발명의 일 실시예를 상세히 설명하기로 한다. Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 재생 속도 조절 시스템의 구성도이다. 도 1을 참조하면, 재생 속도 조절 시스템은 컨텐츠 제공 서버(100), 재생 속도 조절 서버(120), VOD 서버(140) 및 단말(160)을 포함할 수 있다. 도 1에 도시된 컨텐츠 제공 서버(100), 재생 속도 조절 서버(120), VOD 서버(140) 및 단말(160)은 재생 속도 조절 시스템에 의하여 제어될 수 있는 구성요소들을 예시적으로 도시한 것이다. FIG. 1 is a configuration diagram of a playback speed control system according to an embodiment of the present invention. Referring to FIG. 1, the playback speed control system may include a content providing server 100, a playback speed control server 120, a VOD server 140, and a terminal 160. The content providing server 100, the playback speed adjustment server 120, the VOD server 140 and the terminal 160 shown in FIG. 1 illustratively show components that can be controlled by the playback speed control system .

도 1의 재생 속도 조절 시스템의 각 구성요소들은 일반적으로 네트워크(network)를 통해 연결된다. 네트워크는 단말들 및 서버들과 같은 각각의 노드 상호 간에 정보 교환이 가능한 연결 구조를 의미하는 것으로, 이러한 네트워크의 일 예는, Wi-Fi, 블루투스(Bluetooth), 인터넷(Internet), LAN(Local Area Network), Wireless LAN(Wireless Local Area Network), WAN(Wide Area Network), PAN(Personal Area Network), 3G, 4G, LTE 등이 포함되나 이에 한정되지는 않는다. Each component of the regeneration rate control system of Figure 1 is typically connected via a network. A network refers to a connection structure in which information can be exchanged between nodes such as terminals and servers. An example of such a network is Wi-Fi, Bluetooth, Internet, LAN Network, wireless LAN, WAN, PAN, 3G, 4G, LTE, and the like.

컨텐츠 제공 서버(100)는 컨텐츠를 재생 속도 조절 서버(120) 및 VOD 서버(140)에 제공할 수 있다. The content providing server 100 may provide the content to the playback speed adjustment server 120 and the VOD server 140. [

재생 속도 조절 서버(120)는 컨텐츠 제공 서버(100)로부터 제공받은 컨텐츠의 장면을 분석하고, 분석된 장면 정보를 저장할 수 있다. 장면 정보는 장면의 시작 시각, 종료 시각, 중요도 등을 포함할 수 있다. 재생 속도 조절 서버(120)는 단말(160)로부터 재생 속도 조절 이력을 전달받아 이를 수집할 수 있다. 재생 속도 조절 서버(120)는 수집된 단말(160)의 재생 속도 조절 이력을 기초로 단말(160) 별로 재생 속도 조절 성향을 판단할 수 있다. 재생 속도 조절 서버(120)는 컨텐츠의 장면 정보와 단말(160)의 재생 속도 조절 성향에 기초해 컨텐츠의 재생 속도 제어 신호를 생성할 수 있으며, 제어 신호를 VOD 서버(140)로 보내 컨텐츠의 재생 속도를 조절할 수 있다. 재생 속도 조절 서버(120)에 관하여는 이하 도 2에서 상세히 설명하도록 한다. The playback speed adjustment server 120 may analyze the scene of the content provided from the content providing server 100 and store the analyzed scene information. The scene information may include start time, end time, importance, etc. of the scene. The playback speed adjustment server 120 may receive the playback speed adjustment history from the terminal 160 and collect the playback speed adjustment history. The playback speed adjustment server 120 may determine the playback speed adjustment tendency for each terminal 160 based on the playback speed adjustment history of the terminal 160. The playback speed control server 120 can generate a content playback speed control signal based on the scene information of the content and the playback speed control tendency of the terminal 160 and transmits the control signal to the VOD server 140 You can adjust the speed. The playback speed control server 120 will be described in detail below with reference to FIG.

VOD 서버(140)는 컨텐츠 제공 서버(100)로부터 제공받은 컨텐츠를 암호화 등을 거쳐 단말(160)로 제공할 수 있다. VOD 서버(140)는 재생 속도 조절 서버(120)로부터 재생 속도의 조절을 위한 제어 신호를 수신할 수 있으며, 수신한 제어 신호에 따라 컨텐츠의 속도를 조절하여 단말(160)로 제공할 수 있다. The VOD server 140 may provide the content provided from the content providing server 100 to the terminal 160 through encryption or the like. The VOD server 140 may receive a control signal for controlling the playback speed from the playback speed adjustment server 120 and may adjust the speed of the content according to the received control signal and provide the adjusted speed to the terminal 160.

단말(160)은 셋톱박스나 스마트 단말 등일 수 있으나 이에 제한되지 않는다. 단말(160)은 사용자로부터 관심 객체를 입력받아 재생 속도 조절 서버(120)로 전달할 수 있다. 단말(160)은 VOD 서버(140)로부터 제공받은 컨텐츠를 출력할 수 있으며, 리모콘, 스마트 단말 등을 통해 컨텐츠의 재생 속도를 수동으로 조절할 수 있다. 단말(160)은 컨텐츠의 재생 속도를 수동으로 조절하는 경우, 재생 속도 조절의 이력을 재생 속도 조절 서버(120)에 제공할 수 있다. The terminal 160 may be a set-top box, a smart terminal, or the like, but is not limited thereto. The terminal 160 may receive the object of interest from the user and deliver the object of interest to the playback rate control server 120. The terminal 160 can output the content provided from the VOD server 140 and manually adjust the playback speed of the content through a remote controller, a smart terminal, or the like. When the terminal 160 manually adjusts the playback speed of the content, the terminal 160 may provide the playback speed control server 120 with a history of the playback speed control.

도 2는 본 발명의 일 실시예에 따른 재생 속도 조절 서버의 구성도이다. 도 2를 참조하면, 재생 속도 조절 서버(120)는 장면 생성부(121), 장면 분석부(122), 장면 데이터 베이스(123), 이력 수집부(124), 성향 판단부(125) 및 재생 속도 제어부(126)을 포함할 수 있다. 이하에서는 재생 속도 조절 서버(120)의 각 구성에 대해 상세히 설명하도록 한다.2 is a configuration diagram of a playback speed control server according to an embodiment of the present invention. 2, the playback speed adjustment server 120 includes a scene generation unit 121, a scene analysis unit 122, a scene data base 123, a history collection unit 124, a tendency determination unit 125, And a speed control unit 126. Hereinafter, each configuration of the playback speed control server 120 will be described in detail.

장면 생성부(121)는 컨텐츠로부터 샷 경계를 추출하고, 복수의 샷을 포함하는 장면을 생성할 수 있다. 장면 생성부(121)는 복수의 샷을 통합하여 하나의 장면을 생성할 수 있다. 예컨대 물리적으로 같은 공간에서 촬영된 인접 샷들은 하나의 장면으로 통합될 수 있다. 샷의 경계를 추출하는 방법 및 샷으로부터 장면을 구성하는 방법과 관련하여 여러가지 종래기술들이 개시되어 있으며, 본 발명에서는 이를 특정하지 않는다. The scene generation unit 121 may extract a shot boundary from the content, and may generate a scene including a plurality of shots. The scene generation unit 121 may combine a plurality of shots to generate one scene. For example, adjacent shots photographed in the same physical space can be integrated into one scene. Various conventional techniques have been disclosed with respect to a method of extracting a boundary of a shot and a method of constructing a scene from a shot, and the present invention does not specify it.

장면 분석부(122)는 장면 생성부(121)에 의해 생성된 장면을 분석하여 장면 정보를 생성한다. 도 3은 본 발명의 일 실시예에 따른 장면 분석부의 구성도이다. 도 3을 참조하면, 장면 분석부(122)는 객체 검출부(1222), 중요도 할당부(1224) 및 장면 구성부(1226)를 포함할 수 있다. The scene analyzing unit 122 analyzes scenes generated by the scene generating unit 121 and generates scene information. 3 is a configuration diagram of a scene analyzing unit according to an embodiment of the present invention. Referring to FIG. 3, the scene analyzing unit 122 may include an object detecting unit 1222, an importance assigning unit 1224, and a scene forming unit 1226.

객체 검출부(1222)는 검출부 및 인식부를 통해 장면에 등장하는 객체를 검출할 수 있다. 객체 검출부(1222)는 얼굴 검출부, 사물검출부, 음성 검출부 등을 포함할 수 있으며, 이를 통해 장면에 등장하는 객체를 검출할 수 있다. 객체 검출부(1222)는 얼굴 인식부, 사물 인식부 등을 더 포함할 수 있으며, 검출된 객체를 인식하여 관심 객체를 판단할 수 있다. 객체 검출부(1222)는 감성 분류부를 추가로 포함할 수 있으며, 감성 분류부는 대화가 검출된 장면에서 등장 인물들의 음성을 분석하여 감성의 유무를 판단할 수 있으며, 나아가 감성의 종류(흥분, 슬픔, 속삭임 등)를 분류할 수 있다.The object detection unit 1222 can detect an object appearing in the scene through the detection unit and the recognition unit. The object detecting unit 1222 may include a face detecting unit, a object detecting unit, and a voice detecting unit, and may detect an object appearing in the scene. The object detecting unit 1222 may further include a face recognizing unit, an object recognizing unit, and the like. The object detecting unit 1222 can recognize a detected object and determine an object of interest. The object detecting unit 1222 may further include an emotional classifying unit. The emotional classifying unit can determine the presence or absence of emotions by analyzing the voices of the characters in the scene where the conversation is detected. Further, the type of emotions (excitement, Whispers, etc.).

중요도 할당부(1224)는 장면의 중요도를 할당할 수 있다. 중요도 할당부(1224)는 관심 객체의 존재 여부 및 감성의 존재 여부 등을 기준으로 장면의 중요도를 할당할 수 있다. 중요도 할당부(1224)는 하나의 객체만을 기준으로 예컨대 특정 얼굴의 등장 또는 음성 대화의 존부 등을 기준으로 장면의 중요도를 할당하거나, 또는 두 개 이상의 객체를 결합하여 예컨대 특정 얼굴과 음성이 동시에 존재하는 경우 등을 기준으로 장면의 중요도를 할당할 수도 있다.The importance assignment unit 1224 can assign importance of scenes. The importance assigning unit 1224 can assign importance of scenes based on whether or not an object of interest exists and whether there is emotion. The importance degree assigning unit 1224 assigns importance of scenes based on only one object based on, for example, appearance of a specific face or presence or absence of voice conversation, or combines two or more objects so that, for example, And the importance of the scene may be assigned based on the case where the scene is made.

중요도 할당부(1224)는 컨텐츠가 폐쇄 회로 텔레비전(CCTV)의 영상인 경우 움직이는 물체의 존재 여부 및 음향의 발생 여부를 기준으로 중요도를 할당할 수 있다. 폐쇄 회로 텔레비전의 영상은 일반적으로 움직이는 물체가 존재하거나 음향이 발생하는 장면이 의미가 있기 때문에 이 경우에만 정속으로 재생하고, 그 외의 경우에는 고속으로 재생 또는 재생을 스킵함으로써 CCTV영상의 조회시간을 단축할 수 있다. If the content is a video of a closed circuit television (CCTV), the importance assignment unit 1224 can assign importance based on whether a moving object exists and whether sound is generated. Since the video of a closed circuit television generally has a moving object or a scene in which sound is generated, it is possible to reproduce the video at a constant speed only in this case. In other cases, the playback time of the CCTV video is shortened can do.

중요도 할당부(1224)는 중요도를 높음(H)과 낮음(L) 2개로 분류하거나 3개 이상으로 세분화할 수 있다. 중요도 할당부(1224)는 예컨대, 대화가 없는 장면은 중요도가 낮음(L), 대화가 있는 장면 중 보통의 대화장면은 중요도가 중간(M), 대화가 있는 장면 중 감성적인 대화장면은 중요도를 높음(H)로 정의하고, 대화와 대화 사이의 공백기는 중요도를 0으로 정의하여 필요 시 이 구간의 재생을 아예 하지 않을 수도 있다. 또한, 얼굴 객체를 사용하는 경우, 특정 인물의 얼굴이 존재하는 장면은 중요도가 높음(H), 존재하지 않는 장면은 중요도가 낮음(L)로 할당할 수도 있다.The importance assignment unit 1224 can classify the importance into two groups of high (H) and low (L), or subdivide into three or more groups. For example, the importance level assigning unit 1224 determines that a scene having no dialogue is low in importance (L), a normal dialogue scene among the scenes having a dialogue is medium (M), and an emotional dialogue scene High "(H), and a blank space between conversation and conversation is defined as importance 0, so that the reproduction of this section may not be performed if necessary. In addition, when a face object is used, a scene in which a face of a specific person exists may be assigned a high importance (H), and a non-existent scene may be assigned a low importance (L).

장면 구성부(1226)는 객체 검출부(1222) 및 중요도 할당부(1224)로부터 얻어진 정보를 이용해 장면 정보를 생성할 수 있다. 장면 정보는 콘텐츠ID, 각 장면의 시작시각과 종료시각 및 장면의 중요도를 포함할 수 있으며, 예를 들어, XML 언어로 생성되어 메타파일 형태로 저장될 수 있다. The scene configuration unit 1226 can generate scene information using the information obtained from the object detection unit 1222 and the importance degree assignment unit 1224. [ The scene information may include a content ID, start and end times of each scene, and importance of the scene, and may be generated in an XML language and stored in a metafile format, for example.

도 2로 돌아와서, 장면 데이터 베이스(123)는 장면 분석부(122)에서 생성된 장면 정보를 저장할 수 있다. Returning to FIG. 2, the scene database 123 may store scene information generated by the scene analyzer 122.

이력 수집부(124)는 단말로부터 재생 속도 조절 이력을 수신하여 이를 저장할 수 있다. 재생 속도 조절 이력은 단말이 컨텐츠 시청 중 빨리감기(FF)나 되감기(RF), 일시정지(PAUSE), 중단(STOP) 등을 통해 컨텐츠의 재생 속도와 시작/종료를 제어한 이력을 포함할 수 있다. The history collection unit 124 may receive the playback speed adjustment history from the terminal and store the received playback speed adjustment history. The playback speed control history may include a history of controlling the playback speed and start / end of the content through fast forward (FF), rewind (RF), pause (PAUSE), and stop have.

성향 판단부(125)는 이력 수집부(124)에서 수집된 단말의 재생 속도 조절 이력을 기초로 사용자의 재생 속도 조절 성향을 판단할 수 있다. 성향 판단부(125)는 예컨대, 단말이 특정 인물이 등장하는 장면만을 정속도로 재생하고 그 외의 장면에서는 빨리 감기하는 경우, 해당 특정 인물을 사용자의 관심 객체로 판단할 수 있다. 성향 판단부(125)는 예컨대, 단말이 음악 프로그램 시청 중 대화가 등장하는 장면은 빨리 감기하고, 노래가 등장하는 장면은 정속도로 재생하는 경우, 음악 프로그램에 대해서 대화가 존재하는 장면의 중요도를 낮게, 음악이 존재하는 장면의 중요도를 높게 판단할 수 있다. The inclinations determining unit 125 may determine the tendency of the user to adjust the reproduction speed based on the reproduction speed adjustment history of the terminal collected by the history collecting unit 124. [ For example, when the terminal reproduces only a scene in which a specific character appears at a constant speed and fast-forward in other scenes, the propensity determining unit 125 can determine the specific character as a user's interest object. For example, when the terminal plays back the scene in which the dialogue appears while watching the music program, and when the scene in which the song appears is played at the constant speed, the tendency determining unit 125 determines that the degree of importance , The importance of the scene in which the music exists can be judged to be high.

재생 속도 제어부(126)는 장면 분석부(122)에서 분석된 장면 정보와 성향 판단부(125)에서 판단된 단말의 재생 속도 조절 성향을 기초로 컨텐츠의 재생 속도를 조절할 수 있다. 재생 속도 제어부(126)는 제어 신호를 VOD 서버로 보내 VOD 서버가 컨텐츠를 조절된 재생 속도로 스트리밍하여 단말에 제공하도록 할 수 있다. The playback speed controller 126 may adjust the playback speed of the content based on the scene information analyzed by the scene analyzer 122 and the playback speed control tendency of the terminal determined by the inclination determiner 125. [ The playback speed control unit 126 may send a control signal to the VOD server so that the VOD server may stream the content to the terminal at a regulated playback speed.

재생 속도 제어부(126)는 장면 정보에 포함된 장면의 중요도에 따라 재생 속도를 다르게 조절할 수 있다. 예컨대, 장면의 중요도가 높음이면 정속도로 재생을 제어하고, 장면의 중요도가 보통이면 2배속, 장면의 중요도가 낮음이면 4배속으로 재생을 제어할 수 있다. The playback speed control unit 126 may adjust the playback speed differently according to the importance of the scene included in the scene information. For example, if the importance of the scene is high, the reproduction is controlled at the constant speed, and if the importance of the scene is medium, the reproduction is controlled at 2x speed and if the importance of the scene is low, the reproduction can be controlled at 4x.

재생 속도 제어부(126)는 컨텐츠의 재생 속도를 변경 시 재생 속도가 점진적으로 변경되도록 조절할 수 있다. 재생 속도 제어부(126)는 예컨대 최대 속도에 도달할 때까지 재생속도를 1초 단위로 점진적으로 증가시킴으로써 재생속도가 선형으로 증가되도록 조절할 수 있다. 이로써 시청자들의 불편을 최소화하고 보다 나은 시청 경험을 제공할 수 있다. The playback speed control unit 126 may adjust the playback speed to gradually change when the playback speed of the content is changed. The playback speed control unit 126 may adjust the playback speed to increase linearly by gradually increasing the playback speed in increments of one second until the maximum speed is reached, for example. This minimizes the inconvenience of viewers and can provide a better viewing experience.

도 4는 본 발명의 일 실시예에 따른 재생 속도 조절 서버에서 재생 속도를 조절 과정을 나타낸 흐름도이다. 도 4를 참조하면, 단계 S400에서 재생 속도 조절 서버는 컨텐츠의 장면을 생성한다. 하나의 장면은 복수의 샷을 포함할 수 있으며,장면을 생성하는 방법은 본 발명에 있어서 특정하지 않는다.4 is a flowchart illustrating a process of adjusting a playback speed in a playback speed control server according to an embodiment of the present invention. Referring to FIG. 4, in step S400, the playback speed adjustment server generates a scene of contents. One scene may include a plurality of shots, and a method of generating scenes is not specific to the present invention.

단계 S420에서 장면을 분석하여 장면 정보를 생성하고 저장한다. 재생 속도 조절 서버는 컨텐츠의 장면에서 객체를 추출 및 인식할 수 있으며, 장면의 중요도를 할당할 수 있다. 장면의 객체는 특정 사물, 등장 인물, 대화, 배경 음악, 자막, 장소, 감정 등을 포함할 수 있다. 장면의 중요도는 특정 객체의 존재 여부 및 감정의 존재 여부 등을 기초로 할당할 수 있다. 장면 정보는 장면 정보는 콘텐츠ID, 각 장면의 시작시각과 종료시각 및 장면의 중요도를 포함할 수 있으나 이에 제한되지 않는다. In step S420, scenes are analyzed to generate and store scene information. The playback speed control server can extract and recognize objects in the scene of the content, and can assign the importance of the scene. An object of a scene may include a specific object, a character, a dialogue, a background music, a caption, a place, an emotion, and the like. The importance of the scene can be assigned based on whether or not a specific object exists and whether or not an emotion exists. The scene information may include, but is not limited to, a content ID, start and end times of each scene, and importance of the scene.

단계 S440에서 재생 속도 조절 서버는 단말의 재생 속도 조절 이력을 수집한다. 재생 속도 조절 이력은 단말이 컨텐츠 시청 중 빨리감기(FF)나 되감기(RF), 일시정지(PAUSE), 중단(STOP) 등을 통해 컨텐츠의 재생 속도와 시작/종료를 제어한 이력을 포함할 수 있다.In step S440, the playback speed adjustment server collects the playback speed adjustment history of the terminal. The playback speed control history may include a history of controlling the playback speed and start / end of the content through fast forward (FF), rewind (RF), pause (PAUSE), and stop have.

단계 S460에서 수집된 재생 속도 조절 이력을 기초로 단말의 재생 속도 조절 성향을 판단할 수 있다. 재생 속도 조절 서버는, 단말의 재생 속도 조절 이력을 기초로 단말의 관심 객체 등을 판단할 수 있다.The playback speed control tendency of the terminal can be determined based on the playback speed adjustment history collected in step S460. The playback speed control server can determine an object of interest or the like based on the playback speed adjustment history of the terminal.

단계 S480에서 재생 속도 조절 서버는 장면 정보와 단말의 재생 속도 조절 성향을 기초로 컨텐츠의 재생 속도를 조절할 수 있다. 재생 속도 조절 서버는 VOD 서버에 제어 신호를 전송하여 컨텐츠의 재생 속도를 조절할 수 있다. 장면의 중요도를 기초로 재생 속도를 자동으로 조절하여 시청자에게 새로운 시청 경험을 제공할 수 있으며, 단말의 재생 속도 조절 성향을 기초로 재생 속도를 조절함으로써 사용자 맞춤형 재생 속도 조절 서비스를 제공할 수 있다. 재생 속도 조절 서버는 재생 속도를 변경 시 재생 속도가 점진적으로 증가 또는 감소시킬 수 있다.In step S480, the playback speed adjustment server can adjust the playback speed of the content based on the scene information and the playback speed control tendency of the terminal. The playback speed control server can send a control signal to the VOD server to adjust the playback speed of the content. It is possible to provide a new viewing experience to the viewer by automatically adjusting the playback speed based on the importance of the scene, and to provide a user-customized playback speed adjustment service by adjusting the playback speed based on the playback speed control tendency of the terminal. The playback speed control server can gradually increase or decrease the playback speed when changing the playback speed.

상술한 설명에서, 단계 S400 내지 S480은 본 발명의 구현예에 따라서, 추가적인 단계들로 더 분할되거나, 더 적은 단계들로 조합될 수 있다. 또한, 일부 단계는 필요에 따라 생략될 수도 있고, 단계 간의 순서가 변경될 수도 있다.In the above description, steps S400 through S480 may be further divided into additional steps, or combined in fewer steps, according to an embodiment of the present invention. Also, some of the steps may be omitted as necessary, and the order between the steps may be changed.

도 5는 본 발명의 일 실시예에 따른 장면의 중요도 할당 방법의 예시를 설명하기 위한 도면이다. 도 5를 참조하면, 컨텐츠를 복수의 장면으로 분할하고, 각 장면마다 중요도를 할당하는 경우를 도시하고 있다. 도면 부호 520은 중요도를 1과 0 두 단계로 할당한 경우를 도시하며, 도면 부호 540은 중요도를 높음(H), 중간(M), 낮음(L) 3 단계로 할당한 경우를 도시한다. 중요도의 단계는 도 5에 도시된 경우로 제한되지 않으며, 4개 이상의 단계로 분할하는 것도 가능하다. FIG. 5 is a view for explaining an example of a scene importance assignment method according to an embodiment of the present invention. Referring to FIG. 5, there is shown a case where content is divided into a plurality of scenes and importance is assigned to each scene. Reference numeral 520 denotes a case in which importance levels are assigned in two stages of 1 and 0, and reference numeral 540 denotes a case in which importance levels are assigned in three stages of high (H), middle (M) and low (L). The step of importance is not limited to the case shown in Fig. 5, and it is also possible to divide into four or more steps.

도 6은 본 발명의 일 실시예에 따른 재생 속도의 조절 방법의 예시를 설명하기 위한 도면이다. 도 6을 참조하면, 도 6은 장면의 중요도가 도 5의 도면 부호 540에 도시된 것과 같이 할당된 경우에 재생 속도를 제어하는 방법의 예시들을 나타낸다. 재생속도는 S0, S1, S2, S3, Smax 등으로 구성될 수 있다. 예를 들면 S0는 정속도(1배속)에 해당하고, S1은 1.5배속, S2는 2배속, S3는 4배속, Smax는 제공하는 최고속도 등으로 매핑할 수 있으며, 편의에 따라 변경할 수 있다. 콘텐츠의 특성에 따라 S0를 1.2배속이나 1.5배속, 0.8배속 등으로 세팅할 수도 있다. FIG. 6 is a view for explaining an example of a method of adjusting a reproduction speed according to an embodiment of the present invention. Referring to FIG. 6, FIG. 6 shows examples of a method of controlling playback speed when scene importance is assigned as shown at 540 in FIG. 5. The playback speed may be composed of S0, S1, S2, S3, Smax, and the like. For example, S0 corresponds to the constant speed (1x speed), S1 can be mapped to 1.5 times speed, S2 to 2 times speed, S3 to 4 times speed, and Smax to the maximum speed to be provided. Depending on the characteristics of the content, S0 may be set to 1.2 times, 1.5 times, 0.8 times, or the like.

도면 부호 620은 장면의 중요도가 높음일 때는 S0 배속 (예컨대, 1배속), 중요도가 중간일 때는 S2 배속(예컨대, 4배속), 중요도가 낮음일 때는 S3 배속(예컨대 8배속)으로 재생 속도를 제어하되, 속도 변경 시 1초 단위로 점진적으로 증가 및 감소되도록 제어하는 경우를 나타낸다. 재생 속도가 점진적으로 변화하도록 제어하여 갑작스런 속도변화로 인한 시청의 불편을 최소화할 수 있다. 도면 부호 640은 도면 부호 620의 경우에서 중요도가 중간일 때의 배속을 S1 배속으로만 변경한 경우를 나타낸다.Reference numeral 620 denotes a playback speed of S0 (for example, 1 × speed) when the importance of the scene is high, S2 speed (for example, 4 times of speed) when the importance is intermediate, and S3 Control is performed such that the speed is gradually increased or decreased in units of 1 second when the speed is changed. It is possible to minimize the inconvenience of watching due to a sudden change in speed by controlling the reproduction speed to gradually change. Reference numeral 640 denotes a case of changing the double speed when the importance is intermediate in the case of reference numeral 620 to the speed of S1.

도면 부호 660은 재생 속도가 변경되는 구간에서 재생 속도가 선형적으로 증가 및 감소하도록 제어하는 경우를 도시하고 있다. 이러한 경우 보다 자연스럽게 속도를 변화시킬 수 있고, 사용자들에게는 보다 나은 시청경험을 제공할 수 있다. 도면 부호 680은 재생 속도가 크게 변화되는 구간에서는 재생 속도를 선형적으로 증가 및 감소시키고, 재생 속도가 작게 변화되는 구간에서는 재생 속도를 단번에 증가 및 감소시키는 경우를 나타낸다. 장면의 중요도에 따라 재생 속도를 제어하는 방법은 도 6에 도시된 실시예들로 제한되지 않는다.Reference numeral 660 denotes a case where the reproduction speed is linearly increased and decreased in a section where the reproduction speed is changed. In this case, it is possible to change the speed more naturally and to provide a better viewing experience to the users. Reference numeral 680 denotes a case where the reproduction speed is linearly increased or decreased in a section in which the reproduction speed largely changes, and the reproduction speed is increased or decreased in a section in which the reproduction speed is changed small. The method of controlling the playback speed according to the importance of the scene is not limited to the embodiments shown in Fig.

이와 같이, 재생 속도가 자동으로 조절되는 경우, 불편함을 느끼는 사용자는 단말의 재생 속도를 수동으로 조절할 수 있고, 이와 같은 수동 조절 이력은 다시 재생 속도 조절 서버(120)에 의해 수집되어 단말의 재생 속도 조절 성향을 판단하는데 사용될 수 있다. In the case where the playback speed is automatically adjusted, the user who feels discomfort can manually adjust the playback speed of the terminal. Such a manual adjustment history is collected again by the playback speed adjustment server 120, Can be used to determine the propensity to control the speed.

도 4에 도시된 일 실시예에 따른 재생 속도 조절 방법은 컴퓨터에 의해 실행되는 매체에 저장된 컴퓨터 프로그램 또는 컴퓨터에 의해 실행 가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다. The playback speed adjustment method according to the embodiment shown in FIG. 4 may also be implemented in the form of a recording medium including a computer program stored in a medium executed by the computer or instructions executable by the computer. Computer readable media can be any available media that can be accessed by a computer and includes both volatile and nonvolatile media, removable and non-removable media. In addition, the computer-readable medium can include both computer storage media and communication media. Computer storage media includes both volatile and nonvolatile, removable and non-removable media implemented in any method or technology for storage of information such as computer readable instructions, data structures, program modules or other data. Communication media typically includes any information delivery media, including computer readable instructions, data structures, program modules, or other data in a modulated data signal such as a carrier wave, or other transport mechanism.

전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다. It will be understood by those skilled in the art that the foregoing description of the present invention is for illustrative purposes only and that those of ordinary skill in the art can readily understand that various changes and modifications may be made without departing from the spirit or essential characteristics of the present invention. will be. It is therefore to be understood that the above-described embodiments are illustrative in all aspects and not restrictive. For example, each component described as a single entity may be distributed and implemented, and components described as being distributed may also be implemented in a combined form.

본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다. The scope of the present invention is defined by the appended claims rather than the detailed description and all changes or modifications derived from the meaning and scope of the claims and their equivalents are to be construed as being included within the scope of the present invention do.

100: 컨텐츠 제공 서버
120: 재생 속도 조절 서버
140: VOD 서버
160: 단말
100: Content providing server
120: Playback speed control server
140: VOD server
160: terminal

Claims (20)

비디오의 재생 속도를 조절하는 방법에 있어서,
비디오로부터 복수의 샷을 포함하는 장면을 생성하는 단계;
상기 장면의 장면 정보를 분석하여 저장하는 단계;
사용자 단말의 재생 속도 조절 이력을 수집하는 단계;
상기 재생 속도 조절 이력으로부터 상기 사용자 단말의 재생 속도 조절 성향을 판단하는 단계; 및
상기 장면 정보와 상기 재생 속도 조절 성향을 기초로 상기 사용자 단말에서의 상기 비디오의 재생 속도를 조절하는 단계
를 포함하는 재생 속도 조절 방법.
A method of adjusting a playback speed of a video,
Generating a scene including a plurality of shots from a video;
Analyzing and storing scene information of the scene;
Collecting a playback speed adjustment history of the user terminal;
Determining a playback speed control propensity of the user terminal from the playback speed control history; And
Adjusting a playback speed of the video in the user terminal based on the scene information and the playback speed control propensity
And controlling the reproduction speed.
제 1 항에 있어서,
상기 장면의 장면 정보를 분석하여 저장하는 단계는
상기 장면으로부터 객체를 검출하는 단계; 및
싱기 검출된 객체에 기초하여 상기 장면의 중요도를 할당하는 단계
를 포함하는 것인, 재생 속도 조절 방법.
The method according to claim 1,
The step of analyzing and storing the scene information of the scene
Detecting an object from the scene; And
Assigning importance of the scene based on the detected object;
And controlling the reproduction speed of the recording medium.
제 2 항에 있어서,
상기 중요도를 할당하는 단계는 상기 장면의 중요도를 복수의 단계로 할당하고,
상기 재생 속도를 조절하는 단계는, 상기 중요도의 단계에 따라 재생 속도를 다르게 조절하는 것인, 재생 속도 조절 방법.
3. The method of claim 2,
Wherein the step of assigning importance assigns importance of the scene to a plurality of steps,
Wherein the step of regulating the regeneration speed regulates the regeneration speed according to the level of importance.
제 2 항에 있어서,
상기 중요도를 할당하는 단계는 상기 장면의 감성 존재 여부 및 특정 객체의 존재 여부 중 하나 이상에 기초하여 상기 중요도를 할당하는 것인, 재생 속도 조절 방법.
3. The method of claim 2,
Wherein the step of assigning importance assigns the importance based on at least one of presence or absence of emotion of the scene and existence of a specific object.
제 2 항에 있어서,
상기 객체는 사물, 등장 인물, 대화, 배경 음악, 자막, 장소 중 하나 이상을 포함하는 것인, 재생 속도 조절 방법.
3. The method of claim 2,
Wherein the object includes at least one of an object, a character, a dialog, a background music, a subtitle, and a place.
제 1 항에 있어서,
상기 장면 정보는 상기 장면의 시작 시각, 종료 시각, 중요도 중 하나 이상을 포함하는 것인, 재생 속도 조절 방법.
The method according to claim 1,
Wherein the scene information includes at least one of start time, end time, and importance of the scene.
제 1 항에 있어서,
상기 재생 속도를 조절하는 단계는, 상기 비디오의 재생 속도가 점진적으로 변경되도록 조절하는 것인, 재생 속도 조절 방법.
The method according to claim 1,
Wherein the step of adjusting the reproduction speed adjusts the reproduction speed of the video to gradually change.
제 1 항에 있어서,
상기 재생 속도를 조절하는 단계는, 상기 비디오가 폐쇄 회로 텔레비전(CCTV)의 영상인 경우, 움직이는 물체의 존재 여부 및 음향의 발생 여부를 기초로 상기 비디오의 재생 속도를 조절하는 것인, 재생 속도 조절 방법.
The method according to claim 1,
Wherein adjusting the playback speed comprises adjusting the playback speed of the video based on whether the video is a closed circuit television (CCTV) and whether a moving object is present and whether sound is generated, Way.
비디오의 재생 속도를 조절하는 서버에 있어서,
비디오로부터 복수의 샷을 포함하는 장면을 생성하는 장면 생성부;
상기 장면의 장면 정보를 분석하는 장면 분석부;
상기 장면 정보를 저장하는 장면 데이터베이스;
사용자 단말의 재생 속도 조절 이력을 수집하는 이력 수집부;
상기 재생 속도 조절 이력으로부터 상기 사용자 단말의 재생 속도 조절 성향을 판단하는 성향 판단부; 및
상기 장면 정보와 상기 재생 속도 조절 성향을 기초로 상기 사용자 단말에서의 상기 비디오의 재생 속도를 조절하는 재생 속도 제어부
를 포함하는 서버.
A server for controlling a playback speed of a video,
A scene generation unit for generating a scene including a plurality of shots from a video;
A scene analyzer for analyzing scene information of the scene;
A scene database for storing the scene information;
A history collection unit for collecting a playback speed adjustment history of the user terminal;
A propensity determining unit for determining a propensity for regulating the reproduction speed of the user terminal from the reproduction rate control history; And
A playback speed control unit for adjusting a playback speed of the video in the user terminal based on the scene information and the playback speed control propensity,
/ RTI >
제 9 항에 있어서,
상기 장면 분석부는,
상기 장면으로부터 객체를 검출하는 객체 검출부; 및
상기 검출된 객체에 기초하여 상기 장면의 중요도를 할당하는 중요도 할당부
를 포함하는 것인, 서버.
10. The method of claim 9,
The scene analyzing unit,
An object detecting unit for detecting an object from the scene; And
An importance assigning unit for assigning importance of the scene based on the detected object,
And a server.
제 10 항에 있어서,
상기 중요도 할당부는 상기 장면의 중요도를 복수의 단계로 할당하고,
상기 재생 속도 제어부는 상기 중요도에 따라 재생 속도를 다르게 조절하는 것인, 서버.
11. The method of claim 10,
Wherein the importance assigning unit assigns importance of the scene to a plurality of steps,
Wherein the playback speed control unit adjusts the playback speed differently according to the importance.
제 10 항에 있어서,
상기 중요도 할당부는 단계는 상기 장면의 감성 존재 여부 및 특정 객체의 존재 여부 중 하나 이상에 기초하여 상기 중요도를 할당하는 것인, 서버.
11. The method of claim 10,
Wherein the importance assigning unit assigns the importance based on at least one of whether or not there is an emotion of the scene and whether or not a specific object exists.
제 9 항에 있어서,
상기 재생 속도 제어부는 상기 비디오의 재생 속도가 점진적으로 변경되도록 조절하는 것인, 서버.
10. The method of claim 9,
Wherein the playback speed control unit adjusts the playback speed of the video to gradually change.
제 9 항에 있어서,
상기 재생 속도 제어부는 상기 비디오가 폐쇄 회로 텔레비전(CCTV)의 영상인 경우, 움직이는 물체의 존재 여부 및 음향의 발생 여부를 기초로 상기 비디오의 재생 속도를 조절하는 것인, 서버.
10. The method of claim 9,
Wherein the playback speed control unit adjusts the playback speed of the video based on whether a moving object exists and whether sound is generated when the video is a video of a closed circuit television (CCTV).
비디오의 재생 속도를 조절하는 시스템에 있어서,
콘텐츠 제공 서버;
재생 속도 조절 서버;
VOD 서버; 및
단말
을 포함하고,
상기 재생 속도 조절 서버는 상기 비디오로부터 복수의 샷을 포함하는 장면을 생성하고, 상기 장면의 장면의 장면 정보를 분석하여 저장하고, 사용자 단말의 재생 속도 조절 이력을 수집하고, 상기 재생 속도 조절 이력으로부터 상기 사용자 단말의 재생 속도 조절 성향을 판단하고, 상기 장면 정보와 상기 재생 속도 조절 성향을 기초로 상기 사용자 단말에서의 상기 비디오의 재생 속도를 조절하는 것인, 시스템.
A system for adjusting a playback speed of a video,
A content providing server;
A playback speed adjustment server;
VOD server; And
Terminal
/ RTI >
Wherein the playback speed control server generates a scene including a plurality of shots from the video, analyzes and stores scene information of scenes of the scene, collects a playback speed adjustment history of the user terminal, Determining a playback rate control propensity of the user terminal and adjusting a playback speed of the video on the user terminal based on the scene information and the playback rate control propensity.
제 15 항에 있어서,
상기 단말은 상기 비디오의 재생 속도를 수동으로 조절하거나 또는 자동으로 조절하는 것인, 시스템.
16. The method of claim 15,
Wherein the terminal manually or automatically adjusts the playback speed of the video.
제 15 항에 있어서,
상기 단말은 사용자의 관심 객체를 입력하고,
상기 재생 속도 조절 서버는 상기 관심 객체에 기초하여 상기 장면의 중요도를 할당하는 것인, 시스템.
16. The method of claim 15,
The terminal inputs a user's interest object,
Wherein the playback speed adjustment server assigns importance of the scene based on the object of interest.
제 17 항에 있어서,
상기 관심 객체는, 특정 사물, 특정 인물, 특정 감정, 특정 음향, 특정 장소 중 하나 이상을 포함하는 것인, 시스템.
18. The method of claim 17,
Wherein the object of interest comprises at least one of a specific object, a specific person, a particular emotion, a specific sound, or a specific place.
제 15 항에 있어서,
상기 재생 속도 조절 서버는 상기 비디오의 재생 속도가 점진적으로 변경되도록 조절하는 것인, 시스템.
16. The method of claim 15,
Wherein the playback speed adjustment server adjusts the playback speed of the video to gradually change.
제 15 항에 있어서,
상기 재생 속도 조절 서버는 상기 장면의 중요도를 복수의 단계로 할당하고 상기 중요도의 단계에 따라 재생 속도를 다르게 조절하는 것인, 시스템.
16. The method of claim 15,
Wherein the playback speed adjustment server allocates the importance of the scene to a plurality of stages and adjusts the playback speed differently according to the level of importance.
KR1020140194210A 2014-12-30 2014-12-30 Method, server and system for controlling play speed of video KR20160081043A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140194210A KR20160081043A (en) 2014-12-30 2014-12-30 Method, server and system for controlling play speed of video

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140194210A KR20160081043A (en) 2014-12-30 2014-12-30 Method, server and system for controlling play speed of video

Publications (1)

Publication Number Publication Date
KR20160081043A true KR20160081043A (en) 2016-07-08

Family

ID=56503341

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140194210A KR20160081043A (en) 2014-12-30 2014-12-30 Method, server and system for controlling play speed of video

Country Status (1)

Country Link
KR (1) KR20160081043A (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107888948A (en) * 2017-11-07 2018-04-06 北京小米移动软件有限公司 Determine method and device, the electronic equipment of video file broadcasting speed
CN108184169A (en) * 2017-12-28 2018-06-19 广东欧珀移动通信有限公司 Video broadcasting method, device, storage medium and electronic equipment
KR20190082578A (en) * 2018-01-02 2019-07-10 엘지전자 주식회사 Mobile terminal and method for controlling the same
CN110730387A (en) * 2019-11-13 2020-01-24 腾讯科技(深圳)有限公司 Video playing control method and device, storage medium and electronic device
KR20200016085A (en) * 2018-08-06 2020-02-14 주식회사 엘지유플러스 Apparatus and method for providing information exposure protecting image
CN113613083A (en) * 2021-08-19 2021-11-05 乐视新生代(北京)文化传媒有限公司 Video playing method, device, equipment and computer readable storage medium
US11955141B2 (en) 2021-01-12 2024-04-09 Samsung Electronics Co., Ltd. Electronic device, method, and non-transitory storage medium for editing video

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000040087A (en) * 1998-12-17 2000-07-05 구자홍 Method of controlling playback speed of video using scene change distribution
JP2010246000A (en) * 2009-04-09 2010-10-28 Panasonic Corp Video search reproduction device
JP2013102262A (en) * 2011-11-07 2013-05-23 Canon Inc Video reproducing device and video reproducing method
KR20140056616A (en) * 2012-10-30 2014-05-12 주식회사 케이티 Server, device and method for creating refresh rate of contents

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000040087A (en) * 1998-12-17 2000-07-05 구자홍 Method of controlling playback speed of video using scene change distribution
JP2010246000A (en) * 2009-04-09 2010-10-28 Panasonic Corp Video search reproduction device
JP2013102262A (en) * 2011-11-07 2013-05-23 Canon Inc Video reproducing device and video reproducing method
KR20140056616A (en) * 2012-10-30 2014-05-12 주식회사 케이티 Server, device and method for creating refresh rate of contents

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107888948A (en) * 2017-11-07 2018-04-06 北京小米移动软件有限公司 Determine method and device, the electronic equipment of video file broadcasting speed
CN107888948B (en) * 2017-11-07 2020-07-03 北京小米移动软件有限公司 Method and device for determining video file playing speed, electronic equipment and computer readable storage medium
CN108184169A (en) * 2017-12-28 2018-06-19 广东欧珀移动通信有限公司 Video broadcasting method, device, storage medium and electronic equipment
CN108184169B (en) * 2017-12-28 2020-10-09 Oppo广东移动通信有限公司 Video playing method and device, storage medium and electronic equipment
KR20190082578A (en) * 2018-01-02 2019-07-10 엘지전자 주식회사 Mobile terminal and method for controlling the same
WO2019135563A1 (en) * 2018-01-02 2019-07-11 엘지전자 주식회사 Mobile terminal and control method therefor
KR20200016085A (en) * 2018-08-06 2020-02-14 주식회사 엘지유플러스 Apparatus and method for providing information exposure protecting image
CN110730387A (en) * 2019-11-13 2020-01-24 腾讯科技(深圳)有限公司 Video playing control method and device, storage medium and electronic device
US11955141B2 (en) 2021-01-12 2024-04-09 Samsung Electronics Co., Ltd. Electronic device, method, and non-transitory storage medium for editing video
CN113613083A (en) * 2021-08-19 2021-11-05 乐视新生代(北京)文化传媒有限公司 Video playing method, device, equipment and computer readable storage medium

Similar Documents

Publication Publication Date Title
KR20160081043A (en) Method, server and system for controlling play speed of video
US10362357B1 (en) Systems and methods for resuming media in different modes of playback based on attributes of a physical environment
CA2924065C (en) Content based video content segmentation
JP7119008B2 (en) Method and system for correcting input generated using automatic speech recognition based on speech
US8279343B2 (en) Summary content generation device and computer program
US20070214471A1 (en) System, method and computer program product for providing collective interactive television experiences
US10645464B2 (en) Eyes free entertainment
US9767825B2 (en) Automatic rate control based on user identities
CN105144739B (en) Display system with media handling mechanism and its operating method
US11871084B2 (en) Systems and methods for displaying subjects of a video portion of content
US11805295B2 (en) Selective streaming based on dynamic parental rating of content
CN110679153B (en) Method for providing time placement of rebuffering events
JP4812733B2 (en) Information editing apparatus, information editing method, information editing program, and recording medium recording the program
CN114242058A (en) Voice subtitle generating method, system, device, storage medium and electronic device
US11640424B2 (en) Methods and systems for providing searchable media content and for searching within media content
US20230379538A1 (en) Content recommendations for users with disabilities
JP2010246000A (en) Video search reproduction device
JP6560503B2 (en) Rise notification system
US20220167052A1 (en) Dynamic, user-specific content adaptation
CN107071534B (en) Method and system for interaction between user and set top box
JP2008130215A (en) Automatic editing apparatus and automatic editing method
JP2005167456A (en) Method and device for extracting interesting features of av content
US11546673B2 (en) Automatic video augmentation
US11949965B1 (en) Media system with presentation area data analysis and segment insertion feature
US11882334B2 (en) Automated user-responsive video content

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment