WO2018016434A1 - Digest video acquisition device, digest video acquisition method, and recording medium - Google Patents

Digest video acquisition device, digest video acquisition method, and recording medium Download PDF

Info

Publication number
WO2018016434A1
WO2018016434A1 PCT/JP2017/025691 JP2017025691W WO2018016434A1 WO 2018016434 A1 WO2018016434 A1 WO 2018016434A1 JP 2017025691 W JP2017025691 W JP 2017025691W WO 2018016434 A1 WO2018016434 A1 WO 2018016434A1
Authority
WO
WIPO (PCT)
Prior art keywords
frame
video
change information
partial
acquisition unit
Prior art date
Application number
PCT/JP2017/025691
Other languages
French (fr)
Japanese (ja)
Inventor
露峰　浩
一巧 黒木
Original Assignee
Ｓｅｖｅｎ Ｄｅｗ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ｓｅｖｅｎ Ｄｅｗ株式会社 filed Critical Ｓｅｖｅｎ Ｄｅｗ株式会社
Publication of WO2018016434A1 publication Critical patent/WO2018016434A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8549—Creating video summaries, e.g. movie trailer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

[Problem] Conventionally, it has been difficult to acquire a suitable digest video from a video. [Solution] Provided is a digest video acquisition device, comprising: a change information acquisition unit which acquires inter-frame change information which is information which indicates a change among two or more frames from among two or more frames which configure a video; a partial video acquisition unit which, using the inter-frame change information, acquires one or more partial videos which are portions of the video; and an accumulation unit which accumulates a digest video which includes one or more of the partial videos which the partial video acquisition unit has acquired. It is thus possible to acquire a suitable digest video from a video.

Description

ダイジェスト映像取得装置、ダイジェスト映像取得方法、および記録媒体Digest video acquisition device, digest video acquisition method, and recording medium
　本発明は、映像からダイジェスト映像を取得するダイジェスト映像取得装置等に関するものである。 The present invention relates to a digest video acquisition device for acquiring a digest video from a video.
　従来、検索要求を満足するダイジェストを同定し、当該ダイジェストをユーザに提示する映像検索ダイジェスト生成装置があった（特許文献１参照）。かかる装置において、映像を入力し、映像コンテンツ記憶手段に格納し、映像コンテンツ記憶手段から映像を読み出して解析し、キーワードを抽出し、検索ダイジェスト記憶手段に格納し、映像コンテンツ記憶手段から映像を読み出して、該映像を分割した区間のダイジェストを生成するための情報である要約情報として検索ダイジェスト記憶手段に格納する。そして、かかる装置は、ユーザから指定された検索語に対応するキーワードを検索ダイジェスト記憶手段から取得し、該キーワードに対応する要約情報を該検索ダイジェスト記憶手段から取得し、映像コンテンツ記憶手段から該要約情報の区分の映像をダイジェストとして取得して該ユーザの表示手段に出力する装置である。 Conventionally, there has been a video search digest generation device that identifies a digest that satisfies a search request and presents the digest to the user (see Patent Document 1). In such an apparatus, video is input, stored in video content storage means, video is read from video content storage means, analyzed, keywords are extracted, stored in search digest storage means, and video is read from video content storage means Then, it is stored in the search digest storage means as summary information that is information for generating a digest of the section into which the video is divided. Then, such an apparatus acquires a keyword corresponding to the search term designated by the user from the search digest storage unit, acquires summary information corresponding to the keyword from the search digest storage unit, and acquires the summary from the video content storage unit. It is a device that acquires a video of information classification as a digest and outputs it to the display means of the user.
特開２００９－２５９１６７号公報（第１頁、第１図等）Japanese Unexamined Patent Publication No. 2009-259167 (first page, FIG. 1 etc.)
　しかし、従来技術においては、映像から一部を抽出した適切なダイジェスト映像を取得することが困難であった。 However, in the prior art, it was difficult to obtain an appropriate digest video obtained by extracting a part from the video.
　本第一の発明のダイジェスト映像取得装置は、映像を構成する２以上のフレームのうちの２以上のフレーム間の変化を示す情報であるフレーム間変化情報を取得する変化情報取得部と、フレーム間変化情報を用いて、映像の一部である１または２以上の部分映像を取得する部分映像取得部と、部分映像取得部が取得した１以上の部分映像を有するダイジェスト映像を蓄積する蓄積部とを具備するダイジェスト映像取得装置である。 The digest video acquisition device according to the first aspect of the present invention includes a change information acquisition unit that acquires inter-frame change information that is information indicating a change between two or more frames of two or more frames constituting a video, A partial video acquisition unit that acquires one or more partial videos that are part of the video using the change information; and a storage unit that stores a digest video having one or more partial videos acquired by the partial video acquisition unit; Is a digest video acquisition device.
　かかる構成により、フレーム間の変化を示すフレーム間変化情報を用いてダイジェスト映像を取得するため、適切なダイジェスト映像を取得できる。 With such a configuration, an appropriate digest video can be acquired because the digest video is acquired using inter-frame change information indicating a change between frames.
　また、本第二の発明のダイジェスト映像取得装置は、第一の発明に対して、部分映像取得部は、フレーム間変化情報が予め決められた条件を満たすほど大きな変化を示す情報である場合、フレーム間変化情報に対応するフレームを含む１以上の部分映像を取得するダイジェスト映像取得装置である。 Further, the digest video acquisition device of the second aspect of the present invention, in contrast to the first aspect, when the partial video acquisition unit is information indicating a change that is large enough that the inter-frame change information satisfies a predetermined condition, A digest video acquisition device that acquires one or more partial videos including a frame corresponding to inter-frame change information.
　かかる構成により、適切なダイジェスト映像を取得できる。 With such a configuration, an appropriate digest video can be acquired.
　また、本第三の発明のダイジェスト映像取得装置は、第一または第二の発明に対して、変化情報取得部は、２つのフレーム間の変化に関する２以上の特徴量を取得し、２以上の特徴量を用いて、フレーム間変化情報を取得するダイジェスト映像取得装置である。 In the digest video acquisition device according to the third aspect of the present invention, the change information acquisition unit acquires two or more feature amounts related to a change between two frames, in comparison with the first or second aspect. This is a digest video acquisition device that acquires inter-frame change information using feature amounts.
　かかる構成により、適切なダイジェスト映像を取得できる。 With such a configuration, an appropriate digest video can be acquired.
　また、本第四の発明のダイジェスト映像取得装置は、第一から第三いずれか１つの発明に対して、部分映像の数である部分映像数を受け付ける受付部をさらに具備し、部分映像取得部は、部分映像数の部分映像を取得するダイジェスト映像取得装置である。 The digest video acquisition device according to the fourth aspect of the present invention further includes a reception unit that receives the number of partial videos, which is the number of partial videos, for any one of the first to third inventions, and the partial video acquisition unit Is a digest video acquisition device that acquires partial videos corresponding to the number of partial videos.
　かかる構成により、適切なダイジェスト映像を取得できる。 With such a configuration, an appropriate digest video can be acquired.
　また、本第五の発明のダイジェスト映像取得装置は、第一記載から第三いずれか１つの発明に対して、部分映像の開始フレームを選択するための第一選択条件が格納される選択条件格納部をさらに具備し、部分映像取得部は、第一選択条件に合致する１以上のフレームを選択するフレーム選択手段と、フレーム選択手段が選択した１以上の各フレームを開始フレームとする１以上の部分映像を取得する部分映像取得手段とを具備するダイジェスト映像取得装置である。 The digest video acquisition device according to the fifth aspect of the present invention is a selection condition storage for storing a first selection condition for selecting a start frame of a partial video for any one of the first to third aspects of the invention. The partial video acquisition unit includes a frame selection unit that selects one or more frames that match the first selection condition, and one or more frames that use one or more frames selected by the frame selection unit as a start frame. A digest video acquisition device comprising partial video acquisition means for acquiring a partial video.
　かかる構成により、適切なダイジェスト映像を取得できる。 With such a configuration, an appropriate digest video can be acquired.
　また、本第六の発明のダイジェスト映像取得装置は、第五の発明に対して、部分映像取得手段は、開始フレームと次の開始フレームまたは映像の終了フレームとまでの２以上の各シーンから、シーンの長さに応じた長さの部分映像を取得するダイジェスト映像取得装置である。 The digest video acquisition device of the sixth aspect of the present invention is the fifth aspect of the invention, wherein the partial video acquisition means includes two or more scenes from the start frame and the next start frame or video end frame. It is a digest video acquisition device that acquires a partial video having a length corresponding to the length of a scene.
　かかる構成により、適切なダイジェスト映像を取得できる。 With such a configuration, an appropriate digest video can be acquired.
　また、本第七の発明のダイジェスト映像取得装置は、第五の発明に対して、部分映像取得手段は、開始フレームと次の開始フレームまたは映像の終了フレームとまでの２以上の各シーンから、一定長の部分映像を取得するダイジェスト映像取得装置である。 The digest video acquisition device according to the seventh aspect of the present invention is the fifth aspect of the invention, wherein the partial video acquisition means includes two or more scenes from the start frame and the next start frame or video end frame. This is a digest video acquisition device that acquires a partial video of a certain length.
　かかる構成により、適切なダイジェスト映像を取得できる。 With such a configuration, an appropriate digest video can be acquired.
　また、本第八の発明のダイジェスト映像取得装置は、第五から第七いずれか１つの発明に対して、選択条件格納部は、部分映像の終了フレームを選択するための第二選択条件をも格納し、部分映像取得手段は、第二選択条件に合致する１以上のフレームを選択し、開始フレームから選択した終了フレームまでの部分映像を取得するダイジェスト映像取得装置である。 Further, in the digest video acquisition device of the eighth invention, the selection condition storage unit has a second selection condition for selecting an end frame of the partial video, for any one of the fifth to seventh inventions. The storing and partial video acquisition means is a digest video acquisition device that selects one or more frames that match the second selection condition and acquires partial videos from the start frame to the selected end frame.
　かかる構成により、適切なダイジェスト映像を取得できる。 With such a configuration, an appropriate digest video can be acquired.
　本発明によるダイジェスト映像取得装置によれば、フレーム間変化情報を用いてダイジェスト映像を取得するため、適切なダイジェスト映像を取得できる。 According to the digest video acquisition device according to the present invention, an appropriate digest video can be acquired because the digest video is acquired using the inter-frame change information.
実施の形態１におけるダイジェスト映像取得装置１のブロック図Block diagram of digest video acquisition apparatus 1 in the first embodiment 同ダイジェスト映像取得装置１の動作について説明するフローチャートA flowchart for explaining the operation of the digest video acquisition device 1 同フレーム間変化情報取得処理の第一の例について説明するフローチャートFlow chart for explaining a first example of inter-frame change information acquisition processing 同フレーム間変化情報取得処理の第二の例について説明するフローチャートThe flowchart explaining the 2nd example of the change information acquisition process between the frames 同フレーム間変化情報の算出を示す概念図Conceptual diagram showing calculation of interframe change information 同フレーム間変化情報管理表を示す図The figure which shows the same frame change information management table 同コンピュータシステムの概観図Overview of the computer system 同コンピュータシステムのブロック図Block diagram of the computer system
　以下、ダイジェスト映像取得装置等の実施形態について図面を参照して説明する。なお、実施の形態において同じ符号を付した構成要素は同様の動作を行うので、再度の説明を省略する場合がある。 Hereinafter, embodiments of a digest video acquisition device and the like will be described with reference to the drawings. In addition, since the component which attached | subjected the same code | symbol in embodiment performs the same operation | movement, description may be abbreviate | omitted again.
　（実施の形態１） (Embodiment 1)
　本実施の形態において、映像のフレーム間の変化情報であるフレーム間変化情報を取得し、当該フレーム間変化情報を用いて、映像の一部からなるダイジェスト映像を取得するダイジェスト映像取得装置について説明する。 In this embodiment, a digest video acquisition device that acquires inter-frame change information that is change information between frames of a video and acquires a digest video that is a part of the video using the inter-frame change information will be described. .
　また、本実施の形態において、フレーム間変化情報が予め決められた条件を満たすほど大きな変化を示す情報に対応するフレームをシーンの開始フレームとして、映像の一部を取得し、当該映像の一部を含むダイジェスト映像を取得するダイジェスト映像取得装置について説明する。 Further, in the present embodiment, a part of the video is acquired by using a frame corresponding to information indicating a change large enough that the inter-frame change information satisfies a predetermined condition as a start frame of the scene, and a part of the video is acquired. A digest video acquisition device that acquires a digest video including the above will be described.
　また、本実施の形態において、フレーム間の変化に関する２以上の特徴量から、フレーム間ごとに一のフレーム間変化情報を取得し、当該フレーム間変化情報を用いて、映像の一部からなるダイジェスト映像を取得するダイジェスト映像取得装置について説明する。 In the present embodiment, one frame-to-frame change information is acquired for each frame from two or more feature quantities related to the change between frames, and a digest consisting of a part of the video is used using the inter-frame change information. A digest video acquisition device for acquiring video will be described.
　また、本実施の形態において、映像の分割数Ｎ（Ｎは２以上の自然数）を受け付け、当該分割数Ｎの数のシーンを検出し、２以上のシーンごとに部分映像を取得し、当該２以上の部分映像を連結したダイジェスト映像を取得するダイジェスト映像取得装置について説明する。 Further, in the present embodiment, the division number N (N is a natural number of 2 or more) of video is received, the number of divisions N is detected, partial video is obtained for every two or more scenes, and the 2 A digest video acquisition device that acquires a digest video obtained by connecting the above partial videos will be described.
　また、本実施の形態において、予め決められた条件に合致するフレームをシーンの開始フレームとして、映像の一部を取得し、当該映像の一部を含むダイジェスト映像を取得するダイジェスト映像取得装置について説明する。 Also, in the present embodiment, a digest video acquisition device that acquires a part of a video by using a frame that matches a predetermined condition as a start frame of a scene and acquires a digest video including the part of the video will be described. To do.
　また、本実施の形態において、シーンの長さに応じた長さの部分映像を各シーンから取得し、ダイジェスト映像を構成するダイジェスト映像取得装置について説明する。 Also, in the present embodiment, a digest video acquisition device that acquires a partial video having a length corresponding to the length of the scene from each scene and constitutes the digest video will be described.
　また、本実施の形態において、シーンの長さとは無関係に、一定長の部分映像を各シーンから取得し、ダイジェスト映像を構成するダイジェスト映像取得装置について説明する。 Also, in the present embodiment, a digest video acquisition device that acquires a partial video of a certain length from each scene regardless of the length of the scene and constitutes the digest video will be described.
　さらに、本実施の形態において、予め決められた条件を満たす終了フレームを決定し、開始フレームからかかる終了フレームまでの部分映像を取得し、ダイジェスト映像を構成するダイジェスト映像取得装置について説明する。 Furthermore, in the present embodiment, a digest video acquisition device that determines an end frame that satisfies a predetermined condition, acquires a partial video from the start frame to the end frame, and constitutes a digest video will be described.
　図１は、本実施の形態におけるダイジェスト映像取得装置１のブロック図である。 FIG. 1 is a block diagram of a digest video acquisition device 1 according to the present embodiment.
　ダイジェスト映像取得装置１は、格納部１１、受付部１２、処理部１３、および送信部１４を備える。格納部１１は、映像格納部１１１、選択条件格納部１１２、およびダイジェスト映像格納部１１３を備える。 The digest video acquisition device 1 includes a storage unit 11, a reception unit 12, a processing unit 13, and a transmission unit 14. The storage unit 11 includes a video storage unit 111, a selection condition storage unit 112, and a digest video storage unit 113.
　処理部１３は、変化情報取得部１３１、部分映像取得部１３２、および蓄積部１３３を備える。 The processing unit 13 includes a change information acquisition unit 131, a partial video acquisition unit 132, and a storage unit 133.
　部分映像取得部１３２は、フレーム選択手段１３２１、および部分映像取得手段１３２２を備える。 The partial video acquisition unit 132 includes a frame selection unit 1321 and a partial video acquisition unit 1322.
　格納部１１は、各種の情報が格納される。各種の情報とは、例えば、ダイジェスト映像が作成される元になる映像、後述する選択条件、ダイジェスト映像等である。 The storage unit 11 stores various types of information. The various information includes, for example, a video from which a digest video is created, a selection condition described later, a digest video, and the like.
　映像格納部１１１は、２以上のフレームを有する映像が格納される。この映像は、ダイジェスト映像が作成される元になる映像である。この映像に、音声が対応付いて含まれていても良いことは言うまでもない。 The video storage unit 111 stores a video having two or more frames. This video is a video from which a digest video is created. It goes without saying that this video may include audio correspondingly.
　選択条件格納部１１２は、部分映像の開始フレームを選択するための第一選択条件が格納される。第一選択条件は、後述するフレーム間変化情報をパラメータとする条件である。第一選択条件は、例えば、フレーム間変化情報が閾値以上であるフレーム間の変化後のフレームを開始フレームとして選択すること、フレーム間変化情報の値が上位Ｎに対応するフレーム間の変化後のフレームを開始フレームとして選択すること、フレーム間変化情報が閾値以上であるフレーム間の変化後のフレームからＸ（Ｘは１以上の自然数）フレーム後のフレームを開始フレームとして選択すること、フレーム間変化情報の値が上位Ｎに対応するフレーム間の変化後のフレームからＸ（Ｘは１以上の自然数）フレーム後のフレームを開始フレームとして選択すること等である。 The selection condition storage unit 112 stores a first selection condition for selecting a start frame of a partial video. The first selection condition is a condition using inter-frame change information described later as a parameter. The first selection condition is, for example, that a frame after change between frames whose interframe change information is equal to or greater than a threshold is selected as a start frame, and the value after the change between frames corresponding to the upper N Selecting a frame as a start frame, selecting a frame after X (X is a natural number of 1 or more) frames as a start frame from frames after the change between frames whose inter-frame change information is equal to or greater than a threshold, and changing between frames For example, a frame after X (X is a natural number of 1 or more) frames is selected as a start frame from a frame after a change between frames corresponding to the upper N.
　選択条件格納部１１２は、部分映像の終了フレームを選択するための第二選択条件をも格納していることは好適である。第二選択条件は、例えば、部分映像の時間に関する条件である。第二選択条件は、例えば、開始フレームから、シーンの長さをパラメータとする増加関数により算出される時間後、またはフシーンの長さをパラメータとする増加関数により算出されるフレーム数後のフレームを終了フレームとして選択することである。第二選択条件は、例えば、開始フレームから定数時間後のフレームを終了フレームとして選択すること、開始フレームから定数だけ後のフレームを終了フレームとして選択することである。 It is preferable that the selection condition storage unit 112 also stores a second selection condition for selecting an end frame of the partial video. The second selection condition is, for example, a condition related to the partial video time. The second selection condition is, for example, a frame after the time calculated by the increasing function using the scene length as a parameter from the start frame or after the number of frames calculated by the increasing function using the scene length as a parameter. To select it as the end frame. For example, the second selection condition is to select a frame after a constant time from the start frame as an end frame, and to select a frame after a constant number from the start frame as an end frame.
　なお、第一選択条件、および第二選択条件の表現は問わない。第一選択条件、および第二選択条件は、例えば、論理式、プログラム等である。 In addition, the expression of the first selection condition and the second selection condition does not matter. The first selection condition and the second selection condition are, for example, a logical expression and a program.
　ダイジェスト映像格納部１１３は、処理部１３が取得したダイジェスト映像が格納される。 The digest video storage unit 113 stores the digest video acquired by the processing unit 13.
　受付部１２は、各種の指示や映像を受け付ける。各種の指示や映像とは、例えば、開始指示、部分映像数、ダイジェスト映像送信指示等である。開始指示とは、ダイジェスト映像の作成を開始する指示である。また、部分映像数とは、ダイジェスト映像を構成する部分映像の数である。ダイジェスト映像送信指示とは、ダイジェスト映像の送信の指示であり、映像またはダイジェスト映像を識別する映像識別子を有する。ダイジェスト映像送信指示は、通常、ユーザの端末装置（図示しない）から受信される。 The reception unit 12 receives various instructions and videos. The various instructions and videos are, for example, a start instruction, the number of partial videos, a digest video transmission instruction, and the like. The start instruction is an instruction to start creating a digest video. Further, the number of partial videos is the number of partial videos constituting the digest video. The digest video transmission instruction is an instruction to transmit a digest video and has a video identifier for identifying the video or the digest video. The digest video transmission instruction is normally received from a user terminal device (not shown).
　ここで、受け付けとは、キーボードやマウス、タッチパネルなどの入力デバイスから入力された情報の受け付け、有線もしくは無線の通信回線を介して送信された情報の受信、光ディスクや磁気ディスク、半導体メモリなどの記録媒体から読み出された情報の受け付けなどを含む概念である。 Here, reception means reception of information input from an input device such as a keyboard, mouse, touch panel, reception of information transmitted via a wired or wireless communication line, recording on an optical disk, magnetic disk, semiconductor memory, or the like. It is a concept including reception of information read from a medium.
　各種の指示や映像の入力手段は、キーボードやマウスやメニュー画面によるもの等、何でも良い。受付部１２は、キーボード等の入力手段のデバイスドライバーや、メニュー画面の制御ソフトウェア等で実現され得る。 The various instructions and video input means may be anything such as a keyboard, mouse or menu screen. The receiving unit 12 can be realized by a device driver for input means such as a keyboard, control software for a menu screen, or the like.
　処理部１３は、各種の処理を行う。各種の処理とは、例えば、変化情報取得部１３１、部分映像取得部１３２、蓄積部１３３、フレーム選択手段１３２１、部分映像取得手段１３２２等が行う処理である。 The processing unit 13 performs various processes. The various processes are processes performed by the change information acquisition unit 131, the partial video acquisition unit 132, the storage unit 133, the frame selection unit 1321, the partial video acquisition unit 1322, and the like, for example.
　変化情報取得部１３１は、映像格納部１１１の映像からフレーム間変化情報を取得する。フレーム間変化情報は、映像を構成する２以上のフレームのうちの２以上のフレーム間の変化を示す情報である。 The change information acquisition unit 131 acquires inter-frame change information from the video in the video storage unit 111. The inter-frame change information is information indicating a change between two or more frames out of two or more frames constituting a video.
　変化情報取得部１３１は、例えば、２つのフレーム間の変化に関する１または２以上の特徴量を取得し、当該１または２以上の特徴量を用いて、フレーム間変化情報を取得しても良い。かかる場合、フレーム間変化情報は、例えば、０から９までの自然数で示される。なお、フレーム間変化情報は、ここでは、数値が大きくなるほど、変化が大きいことを示す。なお、１以上の特徴量は、例えば、ＤＣ成分、輝度、色値、色差ヒストグラム相関などである。 The change information acquisition unit 131 may acquire, for example, one or more feature amounts related to a change between two frames, and acquire inter-frame change information using the one or more feature amounts. In such a case, the interframe change information is represented by a natural number from 0 to 9, for example. The inter-frame change information here indicates that the change is greater as the numerical value is larger. The one or more feature amounts are, for example, a DC component, luminance, color value, color difference histogram correlation, and the like.
　変化情報取得部１３１は、例えば、上述したフレーム間変化情報を取得する第一から第三の処理を行い、第一フレーム間変化情報、第二フレーム間変化情報、第三フレーム間変化情報を取得する。そして、変化情報取得部１３１は、第一フレーム間変化情報、第二フレーム間変化情報、第三フレーム間変化情報を用いてフレーム間変化情報を取得する。なお、第一フレーム間変化情報、第二フレーム間変化情報、第三フレーム間変化情報は、それぞれが大きい値である（変化が大きい）ほど、フレーム間変化情報が大きい値（例えば、９に近づく）を採る。なお、２つのフレーム間からフレーム間変化情報を取得する場合、変化情報取得部１３１は、フレーム微分値をフレーム間変化情報として取得する、と言える。 For example, the change information acquisition unit 131 performs the first to third processes for acquiring the above-described interframe change information, and acquires the first interframe change information, the second interframe change information, and the third interframe change information. To do. Then, the change information acquisition unit 131 acquires inter-frame change information using the first inter-frame change information, the second inter-frame change information, and the third inter-frame change information. The first inter-frame change information, the second inter-frame change information, and the third inter-frame change information each have a larger value (larger change), and the larger the inter-frame change information (for example, closer to 9). ). In addition, when acquiring inter-frame change information from between two frames, it can be said that the change information acquisition unit 131 acquires a frame differential value as inter-frame change information.
　変化情報取得部１３１は、３以上のフレームの組を取得し、３以上のフレームの組からフレーム間変化情報を取得しても良い。変化情報取得部１３１は、例えば、３つのフレームの組の中の前２つのフレーム間のフレーム微分値と、後２つのフレーム間のフレーム微分値とを取得し、２つのフレーム微分値の差異からフレーム間変化情報を取得しても良い。なお、変化情報取得部１３１は、通常、２つのフレーム微分値の差異をパラメータとする増加関数により、フレーム間変化情報を取得する。 The change information acquisition unit 131 may acquire a set of three or more frames and acquire inter-frame change information from the three or more frame sets. The change information acquisition unit 131 acquires, for example, the frame differential value between the previous two frames in the set of three frames and the frame differential value between the subsequent two frames, and determines the difference between the two frame differential values. Inter-frame change information may be acquired. Note that the change information acquisition unit 131 usually acquires inter-frame change information using an increasing function using a difference between two frame differential values as a parameter.
　フレーム間変化情報は、２以上のフレーム間の変化を示す情報の微分値（変化の度合い、変化の傾きと言っても良い）でも良い。つまり、変化情報取得部１３１は、例えば、上記の第一フレーム間変化情報、第二フレーム間変化情報、第三フレーム間変化情報のうちの１以上の情報から取得される２以上の変化に関する情報の微分値であっても良い。 The inter-frame change information may be a differential value of information indicating a change between two or more frames (may be referred to as a degree of change or a change slope). That is, the change information acquisition unit 131, for example, information on two or more changes acquired from one or more of the above-described first interframe change information, second interframe change information, and third interframe change information. May be a differential value.
　フレーム間変化情報は、異なる２以上のフレーム間の変化に関する情報であれば良い。フレーム間変化情報は、好ましくは、隣接するフレームを含む、異なる２以上のフレーム間の変化に関する情報であれば良い。 The inter-frame change information may be information regarding changes between two or more different frames. The inter-frame change information is preferably information regarding changes between two or more different frames including adjacent frames.
　さらに具体的には、変化情報取得部１３１は、例えば、以下のように動作する。まず、変化情報取得部１３１は、映像の最初からフレーム間変化情報を取得する対象となる２つのフレームの組を、順次、選択する。次に、変化情報取得部１３１は、選択したフレームの間のフレーム間変化情報を取得する。 More specifically, the change information acquisition unit 131 operates as follows, for example. First, the change information acquisition unit 131 sequentially selects a pair of two frames from which inter-frame change information is acquired from the beginning of the video. Next, the change information acquisition unit 131 acquires inter-frame change information between the selected frames.
　なお、フレーム間変化情報は、例えば、２つのフレームである画像の類似度をパラメータとする減少関数（例えば、逆数）により取得される。また、フレーム間変化情報は、例えば、以下の第一から第四のいずれかの処理により算出される。 Note that the inter-frame change information is acquired by, for example, a decreasing function (for example, the reciprocal number) using the similarity between two frames as a parameter. In addition, the interframe change information is calculated, for example, by one of the following first to fourth processes.
　フレーム間変化情報の第一の取得処理は、ピクセル毎比較処理である。ピクセル毎比較処理とは、２つの各フレームの空間上の同一ピクセルの色値（例えば、ＲＧＢの値）の差であえる色値差を取得する。２つの各フレーム（フレーム１とフレーム２）の同一位置上のピクセルの色値がそれぞれ（ｒ１，ｇ１，ｂ１）、（ｒ２，ｇ２，ｂ２）であるとした場合、色値差（ｄ）は、数式１で示される。 The first acquisition process of interframe change information is a pixel-by-pixel comparison process. In the pixel-by-pixel comparison process, a color value difference that is a difference between color values (for example, RGB values) of the same pixel in the space of two frames is acquired. If the color values of the pixels at the same position in each of the two frames (frame 1 and frame 2) are (r1, g1, b1) and (r2, g2, b2), respectively, the color value difference (d) is , Expressed by Equation 1.
　そして、変化情報取得部１３１は、例えば、複数のピクセル間の色値差の平均値をフレーム間変化情報として取得する。また、変化情報取得部１３１は、例えば、当該色値差の平均値が大きいほど、大きい値となるフレーム間変化情報を取得しても良い。つまり、変化情報取得部１３１は、色値差の平均値をパラメータとする増加関数により、フレーム間変化情報を取得しても良い。なお、ピクセル毎比較処理により得られたフレーム間変化情報を第一フレーム間変化情報と言う。
Figure JPOXMLDOC01-appb-M000001
 Then, the change information acquisition unit 131 acquires, for example, an average value of color value differences between a plurality of pixels as interframe change information. Further, the change information acquisition unit 131 may acquire, for example, inter-frame change information that has a larger value as the average value of the color value differences is larger. That is, the change information acquisition unit 131 may acquire inter-frame change information by an increasing function using the average value of color value differences as a parameter. The inter-frame change information obtained by the pixel-by-pixel comparison process is referred to as first inter-frame change information.
Figure JPOXMLDOC01-appb-M000001
　フレーム間変化情報の第二の取得処理は、ピクセル比較処理である。ピクセル比較処理とは、２つの各フレーム（フレーム１とフレーム２）の同一位置上のピクセルの色値差（ｄ）を算出し、色値差（ｄ）が閾値以上または閾値より大きい場合、エラーピクセルと判断し、エラーピクセルの数を取得する処理である。つまり、変化情報取得部１３１は、エラーピクセルの数をフレーム間変化情報として取得する。変化情報取得部１３１は、エラーピクセルの数が多いほど、大きい値となるフレーム間変化情報を取得しても良い。つまり、変化情報取得部１３１は、エラーピクセルの数をパラメータとする増加関数により、フレーム間変化情報を取得しても良い。なお、ピクセル比較処理により得られたフレーム間変化情報を第二フレーム間変化情報と言う。 The second acquisition process of interframe change information is a pixel comparison process. Pixel comparison processing calculates the color value difference (d) of pixels at the same position in two frames (frame 1 and frame 2), and if the color value difference (d) is greater than or equal to a threshold or greater than the threshold, an error This is processing for determining a pixel and obtaining the number of error pixels. That is, the change information acquisition unit 131 acquires the number of error pixels as inter-frame change information. The change information acquisition unit 131 may acquire inter-frame change information that has a larger value as the number of error pixels increases. That is, the change information acquisition unit 131 may acquire inter-frame change information using an increasing function using the number of error pixels as a parameter. The inter-frame change information obtained by the pixel comparison process is referred to as second inter-frame change information.
　フレーム間変化情報の第三の取得処理は、カラーヒストグラム比較処理である。なお、カラーヒストグラムとは、画像中に各色が何ピクセルあるか数えて作成した棒グラフである。カラーヒストグラム比較処理は、例えば、２つのフレームの各色の数の差異の合計または各色の数の差異の平均値や中央値等をフレーム間変化情報として取得する処理である。また、変化情報取得部１３１は、例えば、２つのフレームの各色の数の差異の合計または各色の数の差異の平均値や中央値等が大きい、大きい値となるフレーム間変化情報を取得しても良い。つまり、変化情報取得部１３１は、２つのフレームの各色の数の差異の合計または各色の数の差異の平均値や中央値等をパラメータとする増加関数により、フレーム間変化情報を取得しても良い。なお、カラーヒストグラム比較処理により得られたフレーム間変化情報を第三フレーム間変化情報と言う。 The third acquisition process of interframe change information is a color histogram comparison process. The color histogram is a bar graph created by counting how many pixels each color is in the image. The color histogram comparison process is a process for obtaining, for example, the total difference in the number of colors in two frames or the average value or median value of the difference in the number of colors as inter-frame change information. In addition, the change information acquisition unit 131 acquires, for example, inter-frame change information that has a large value such as a sum of differences in the number of colors of two frames or an average value or a median of differences in the numbers of colors. Also good. That is, the change information acquisition unit 131 may acquire the inter-frame change information by an increase function using the sum of the differences in the number of colors in two frames or the average value or the median of the differences in the numbers of colors as parameters. good. The inter-frame change information obtained by the color histogram comparison process is referred to as third inter-frame change information.
　また、変化情報取得部１３１は、上記の処理において、例えば、正規化されたフレーム間変化情報（例えば、０から９の整数のうちのいずれか）を取得しても良い。 Further, the change information acquisition unit 131 may acquire, for example, normalized inter-frame change information (for example, any one of integers from 0 to 9) in the above processing.
　フレーム間変化情報の第四の取得処理は、分割領域比較処理である。分割領域比較処理とは、以下のような処理である。つまり、変化情報取得部１３１は、２つの各フレーム（フレーム１とフレーム２）を２以上の領域に分割し、２以上の分割領域を得る。そして、変化情報取得部１３１は、２つの各フレームの同一の分割領域に対して、分割領域間の変換の度合いを示す情報である分割領域変化情報を、２以上の各分割領域ごとに取得する。そして、変化情報取得部１３１は、２以上の各分割領域の２以上の分割領域変化情報を用いて、フレーム間変化情報を取得する。分割領域比較処理において、変化情報取得部１３１は、２以上の各分割領域に対して、上述したピクセル毎比較処理により分割領域変化情報を取得しても良いし、ピクセル比較処理により分割領域変化情報を取得しても良いし、２つの各分割領域における１以上の特徴量の差異から分割領域変化情報を取得しても良い。 The fourth acquisition process of inter-frame change information is a divided area comparison process. The divided area comparison process is the following process. That is, the change information acquisition unit 131 divides each of the two frames (frame 1 and frame 2) into two or more areas to obtain two or more divided areas. Then, the change information acquisition unit 131 acquires, for each of the two or more divided areas, divided area change information that is information indicating the degree of conversion between the divided areas for the same divided area of each of the two frames. . Then, the change information acquisition unit 131 acquires inter-frame change information using two or more divided region change information of each of two or more divided regions. In the divided region comparison process, the change information acquisition unit 131 may acquire the divided region change information for each of two or more divided regions by the pixel-by-pixel comparison process described above, or the divided region change information by the pixel comparison process. May be acquired, or divided region change information may be acquired from a difference between one or more feature amounts in each of the two divided regions.
　部分映像取得部１３２は、フレーム間変化情報を用いて、映像から１または２以上の部分映像を取得する。なお、部分映像は映像の一部である。ここで部分映像を取得する処理は、部分映像の開始フレームと終了フレームを特定する処理でも良い。また、具体的には、部分映像取得部１３２は、フレーム間変化情報が予め決められた条件を満たすほど大きな変化を示す情報である場合、当該フレーム間変化情報に対応するフレームを含む１以上の部分映像を取得する。フレーム間変化情報に対応するフレームとは、通常、フレーム間変化情報の算出対象となった２以上のフレームである。フレーム間変化情報に対応するフレームは、通常、フレーム間変化情報の算出対象となった２以上のフレームのうちの、時間的に最後のフレームである。ただし、フレーム間変化情報に対応するフレームは、フレーム間変化情報の算出対象となった２以上のフレームのうちのいずれかを基準として、時間的に後のフレーム（例えば、３フレーム後のフレーム、１０フレーム後のフレーム等）でも良い。 The partial video acquisition unit 132 acquires one or more partial videos from the video using the inter-frame change information. The partial video is a part of the video. Here, the process of acquiring the partial video may be a process of specifying the start frame and the end frame of the partial video. Specifically, when the inter-frame change information is information indicating a change that is large enough to satisfy a predetermined condition, the partial video acquisition unit 132 includes one or more frames including a frame corresponding to the inter-frame change information. Get partial video. The frames corresponding to the inter-frame change information are usually two or more frames that are subject to calculation of inter-frame change information. The frame corresponding to the inter-frame change information is usually the last frame in time among the two or more frames for which the inter-frame change information is calculated. However, the frame corresponding to the inter-frame change information is based on any one of two or more frames for which the inter-frame change information is to be calculated, for example, a temporally subsequent frame (for example, a frame after 3 frames, It may be a frame after 10 frames).
　部分映像取得部１３２は、受付部１２で受け付けられた部分映像数の部分映像を取得しても良い。なお、部分映像取得部１３２が取得する部分映像の長さ（例えば、時間、フレーム数）は予め決められていても良いし、動的に変わっても良い。 The partial video acquisition unit 132 may acquire partial videos of the number of partial videos received by the reception unit 12. Note that the length (for example, time and the number of frames) of the partial video acquired by the partial video acquisition unit 132 may be determined in advance or may be dynamically changed.
　フレーム選択手段１３２１は、第一選択条件に合致する１以上のフレームを選択する。フレーム選択手段１３２１が取得した１以上の各フレームは、部分映像の開始フレームである。なお、第一選択条件は、例えば、フレーム間変化情報が閾値以上または閾値より大きいことである。また、第一選択条件は、例えば、フレーム間変化情報の上位Ｎであることである。なお、Ｎは部分映像数または部分映像数－１であり、自然数である。 The frame selection unit 1321 selects one or more frames that meet the first selection condition. Each of the one or more frames acquired by the frame selection unit 1321 is a start frame of a partial video. Note that the first selection condition is, for example, that the interframe change information is greater than or equal to a threshold value or greater than the threshold value. The first selection condition is, for example, the top N of interframe change information. Note that N is the number of partial videos or the number of partial videos minus 1, which is a natural number.
　部分映像取得手段１３２２は、フレーム選択手段１３２１が選択した１以上の各フレームを開始フレームとする１以上の部分映像を取得する。 The partial video acquisition unit 1322 acquires one or more partial videos having one or more frames selected by the frame selection unit 1321 as a start frame.
　部分映像取得手段１３２２は、２以上の各シーンから、シーンの長さに応じた長さの部分映像を取得しても良い。シーンとは、開始フレームと次の開始フレームまでフレーム群、または開始フレームと映像の終了フレームとまでのフレーム群である。 The partial video acquisition means 1322 may acquire a partial video having a length corresponding to the length of the scene from two or more scenes. A scene is a frame group from the start frame to the next start frame, or a frame group from the start frame to the end frame of the video.
　部分映像取得手段１３２２は、２以上の各シーンから、一定長の部分映像を取得しても良い。一定長を特定する情報は、格納部１１に格納されている。 The partial video acquisition unit 1322 may acquire a partial video having a certain length from two or more scenes. Information for specifying a certain length is stored in the storage unit 11.
　部分映像取得手段１３２２は、第二選択条件に合致する１以上のフレームを終了フレームとして選択し、開始フレームから選択した終了フレームまでの部分映像を取得する。なお、第二選択条件は、例えば、開始フレームからＭフレーム後のフレームを終了フレームとして選択することである。また、第二選択条件は、例えば、開始フレームが含まれるシーンの長さに応じた部分映像の長さの決定し、開始フレームから当該部分映像の長さに対応するフレームを終了フレームとして選択することである。 The partial video acquisition unit 1322 selects one or more frames that match the second selection condition as end frames, and acquires partial videos from the start frame to the selected end frame. Note that the second selection condition is, for example, to select a frame after M frames from the start frame as an end frame. The second selection condition is, for example, determining the length of the partial video according to the length of the scene including the start frame, and selecting the frame corresponding to the length of the partial video as the end frame from the start frame. That is.
　蓄積部１３３は、部分映像取得部１３２が取得した１以上の部分映像を有するダイジェスト映像を蓄積する。蓄積部１３３は、部分映像取得部１３２が取得した２以上の部分映像を連結して、ダイジェスト映像を生成し、当該ダイジェスト映像を蓄積しても良い。ここで、蓄積とは、通常、格納部１１への格納であるが、外部の装置に蓄積することでも良い。また、ダイジェスト映像を蓄積することは、映像の開始フレームおよび終了フレームに対応付けて、フラグを付加し、当該フラグを用いて、ダイジェスト映像が再生できる状況を構成することでも良い。なお、ここでのフラグとは、例えば、後述する開始フラグ、または終了フラグである。 The accumulation unit 133 accumulates the digest video having one or more partial videos acquired by the partial video acquisition unit 132. The storage unit 133 may link the two or more partial videos acquired by the partial video acquisition unit 132 to generate a digest video, and store the digest video. Here, accumulation is usually storage in the storage unit 11, but it may be accumulated in an external device. In addition, the digest video may be stored by adding a flag in association with the start frame and the end frame of the video and configuring a situation in which the digest video can be reproduced using the flag. The flag here is, for example, a start flag or an end flag described later.
　送信部１４は、ダイジェスト映像を図示しない端末装置に送信する。送信部１４は、部分映像取得部１３２が取得した１以上の部分映像を端末装置に送信しても良い。送信部１４は、例えば、受付部１２がダイジェスト映像送信指示を受け付けた場合に、当該ダイジェスト映像送信指示に対応するダイジェスト映像を端末装置に送信する。なお、この端末装置は、ダイジェスト映像送信指示を送信した装置である。 The transmission unit 14 transmits the digest video to a terminal device (not shown). The transmission unit 14 may transmit one or more partial videos acquired by the partial video acquisition unit 132 to the terminal device. For example, when the reception unit 12 receives a digest video transmission instruction, the transmission unit 14 transmits a digest video corresponding to the digest video transmission instruction to the terminal device. This terminal device is a device that has transmitted a digest video transmission instruction.
　格納部１１、映像格納部１１１、選択条件格納部１１２、ダイジェスト映像格納部１１３は、不揮発性の記録媒体が好適であるが、揮発性の記録媒体でも実現可能である。 The storage unit 11, the video storage unit 111, the selection condition storage unit 112, and the digest video storage unit 113 are preferably non-volatile recording media, but can also be realized by volatile recording media.
　格納部１１等に情報が記憶される過程は問わない。例えば、記録媒体を介して情報が格納部１１等で記憶されるようになってもよく、通信回線等を介して送信された情報が格納部１１等で記憶されるようになってもよく、あるいは、入力デバイスを介して入力された情報が格納部１１等で記憶されるようになってもよい。 The process in which information is stored in the storage unit 11 or the like is not limited. For example, information may be stored in the storage unit 11 or the like via a recording medium, information transmitted via a communication line or the like may be stored in the storage unit 11 or the like, Alternatively, information input via the input device may be stored in the storage unit 11 or the like.
　処理部１３、変化情報取得部１３１、部分映像取得部１３２、蓄積部１３３、フレーム選択手段１３２１、部分映像取得手段１３２２は、通常、ＭＰＵやメモリ等から実現され得る。処理部１３等の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、処理部１３等の処理手順は、ハードウェア（専用回路）で実現しても良い。 The processing unit 13, the change information acquisition unit 131, the partial video acquisition unit 132, the storage unit 133, the frame selection unit 1321, and the partial video acquisition unit 1322 can be usually realized by an MPU, a memory, or the like. The processing procedure of the processing unit 13 or the like is usually realized by software, and the software is recorded on a recording medium such as a ROM. However, the processing procedure of the processing unit 13 and the like may be realized by hardware (dedicated circuit).
　送信部１４は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。 The transmission unit 14 is usually realized by a wireless or wired communication means, but may be realized by a broadcasting means.
　次に、ダイジェスト映像取得装置１の動作について、図２のフローチャートを用いて説明する。 Next, the operation of the digest video acquisition device 1 will be described using the flowchart of FIG.
　（ステップＳ２０１）受付部１２は、開始指示を受け付けたか否かを判断する。開始指示を受け付けた場合はステップＳ２０２に行き、開始指示を受け付けない場合はステップＳ２１２に行く。 (Step S201) The receiving unit 12 determines whether a start instruction has been received. When the start instruction is accepted, the process goes to step S202, and when the start instruction is not accepted, the process goes to step S212.
　（ステップＳ２０２）変化情報取得部１３１は、カウンタｉに１を代入する。 (Step S202) The change information acquisition unit 131 assigns 1 to the counter i.
　（ステップＳ２０３）変化情報取得部１３１は、映像格納部１１１の映像の中に、ｉ番目の組が存在するか否かを判断する。ｉ番目の組が存在する場合はステップＳ２０４に行き、ｉ番目の組が存在しない場合はステップＳ２０６に行く。なお、ｉ番目の組とは、フレーム間変化情報を取得する対象の２以上のフレームである。例えば、ｉ番目の組とは、フレーム間変化情報を取得する対象の２つの連続するフレームである。 (Step S203) The change information acquisition unit 131 determines whether or not the i-th set exists in the video in the video storage unit 111. If the i-th set exists, the process goes to step S204. If the i-th set does not exist, the process goes to step S206. The i-th set is two or more frames from which inter-frame change information is acquired. For example, the i-th set is two consecutive frames from which inter-frame change information is acquired.
　（ステップＳ２０４）変化情報取得部１３１は、ｉ番目の組のフレーム群に対して、フレーム間変化情報を取得する。なお、フレーム間変化情報取得処理について、図３、図４のフローチャートを用いて説明する。 (Step S204) The change information acquisition unit 131 acquires inter-frame change information for the i-th group of frames. The inter-frame change information acquisition process will be described with reference to the flowcharts of FIGS.
　（ステップＳ２０５）変化情報取得部１３１は、カウンタｉを１、インクリメントする。ステップＳ２０３に戻る。 (Step S205) The change information acquisition unit 131 increments the counter i by one. The process returns to step S203.
　（ステップＳ２０６）フレーム選択手段１３２１は、第一選択条件に合致する１または２以上の開始フレームを選択する。第一選択条件は、例えば、フレーム間変化情報が閾値以上または閾値より大きい（変化が激しい）フレームである。なお、当該開始フレームは、通常、ｉ番目の組のフレーム群のうちの最後のフレームである。 (Step S206) The frame selection unit 1321 selects one or more start frames that match the first selection condition. The first selection condition is, for example, a frame in which inter-frame change information is equal to or greater than a threshold value or greater than a threshold value (change is severe). The start frame is usually the last frame in the i-th group of frames.
　（ステップＳ２０７）部分映像取得手段１３２２は、カウンタｊに１を代入する。 (Step S207) The partial video acquisition unit 1322 assigns 1 to the counter j.
　（ステップＳ２０８）部分映像取得手段１３２２は、ｊ番目の開始フレームが存在するか否かを判断する。ｊ番目の開始フレームが存在する場合はステップＳ２０９に行き、ｊ番目の開始フレームが存在しない場合はステップＳ２１１に行く。 (Step S208) The partial video acquisition unit 1322 determines whether or not the j-th start frame exists. If the jth start frame exists, the process goes to step S209, and if the jth start frame does not exist, the process goes to step S211.
　（ステップＳ２０９）部分映像取得手段１３２２は、ｊ番目の開始フレームに対応する終了フレームであり、第二選択条件に合致する終了フレームを決定する。なお、この終了フレームは、（ｊ＋１）番目の開始フレームより時間的に前のフレームである。また、部分映像取得手段１３２２が終了フレームを決定する処理は、例えば、終了フレームの識別子（例えば、フレーム番号）を取得すること、終了フレームの識別子（例えば、フレーム番号）を開始フレームの識別子に対応付けて蓄積すること、終了フレームに終了フレームであることを示すフラグを付加すること等である。終了フレームを決定する処理の内容は問わない。 (Step S209) The partial video acquisition unit 1322 determines an end frame that corresponds to the jth start frame and that matches the second selection condition. This end frame is a frame temporally before the (j + 1) th start frame. In addition, the process in which the partial video acquisition unit 1322 determines the end frame includes, for example, acquiring an end frame identifier (for example, frame number), and corresponding the end frame identifier (for example, frame number) to the start frame identifier. For example, adding a flag indicating that the frame is an end frame, and the like. The content of the process for determining the end frame does not matter.
　（ステップＳ２１０）部分映像取得手段１３２２は、カウンタｊを１、インクリメントする。ステップＳ２０８に戻る。 (Step S210) The partial video acquisition unit 1322 increments the counter j by 1. The process returns to step S208.
　（ステップＳ２１１）蓄積部１３３は、部分映像取得部１３２が取得した１以上の部分映像を有するダイジェスト映像を蓄積する。ステップＳ２０１に戻る。なお、蓄積部１３３は、例えば、開始フレームから終了フレームまでのフレーム群を切り出し、部分映像を取得し、取得した２以上の部分映像を連結してダイジェスト映像を生成し、当該ダイジェスト映像を蓄積しても良い。また、蓄積部１３３は、フレーム選択手段１３２１が取得した開始フレームの識別子と、部分映像取得手段１３２２が取得した終了フレームの識別子との組を、格納部１１に蓄積しても良い。また、蓄積部１３３は、フレーム選択手段１３２１が取得した開始フレームの識別子に対応する開始フレームに、開始フレームである旨のフラグを付加し、かつ部分映像取得手段１３２２が取得した終了フレームの識別子に対応する終了フレームに、終了フレームである旨のフラグを付加するなどしても良い。つまり、蓄積部１３３がダイジェスト映像を蓄積する処理は、ダイジェスト映像を取得できるようにする処理であれば良い。 (Step S211) The storage unit 133 stores a digest video having one or more partial videos acquired by the partial video acquisition unit 132. The process returns to step S201. For example, the storage unit 133 cuts out a frame group from the start frame to the end frame, acquires partial videos, generates a digest video by connecting two or more acquired partial videos, and stores the digest video. May be. In addition, the storage unit 133 may store, in the storage unit 11, a set of the start frame identifier acquired by the frame selection unit 1321 and the end frame identifier acquired by the partial video acquisition unit 1322. In addition, the storage unit 133 adds a flag indicating that the frame is a start frame to the start frame corresponding to the identifier of the start frame acquired by the frame selection unit 1321, and adds the flag indicating the end frame acquired by the partial video acquisition unit 1322 to the start frame. A flag indicating the end frame may be added to the corresponding end frame. In other words, the process for accumulating the digest video by the accumulating unit 133 may be a process that enables the digest video to be acquired.
　（ステップＳ２１２）受付部１２は、ダイジェスト映像送信指示を図示しない端末装置から受信したか否かを判断する。ダイジェスト映像送信指示を受信した場合はステップＳ２１３に行き、受信しなかった場合はステップＳ２０１に戻る。 (Step S212) The accepting unit 12 determines whether or not a digest video transmission instruction has been received from a terminal device (not shown). If a digest video transmission instruction is received, the process goes to step S213, and if not received, the process returns to step S201.
　（ステップＳ２１３）処理部１３は、ステップＳ２１２で受信されたダイジェスト映像送信指示に対応するダイジェスト映像を取得する。 (Step S213) The processing unit 13 acquires a digest video corresponding to the digest video transmission instruction received in step S212.
　（ステップＳ２１４）送信部１４は、ステップＳ２１３で取得されたダイジェスト映像を図示しない端末装置に送信する。ステップＳ２０１に戻る。 (Step S214) The transmission unit 14 transmits the digest video acquired in step S213 to a terminal device (not shown). The process returns to step S201.
　なお、図２のフローチャートにおいて、例えば、フレーム間変化情報取得処理の対象となるフレームの組は、２フレームであり、時間的に連続する２つのフレームである、とする。
しても良い。 In the flowchart of FIG. 2, for example, it is assumed that the set of frames to be subjected to the inter-frame change information acquisition process is two frames and two frames that are temporally continuous.
You may do it.
　また、図２のフローチャートにおいて、部分映像取得手段１３２２は、映像の最初のフレームを、部分映像の開始フレームとし、第二選択条件に合致する終了フレームを決定しても良い。 Further, in the flowchart of FIG. 2, the partial video acquisition unit 1322 may use the first frame of the video as the start frame of the partial video and determine an end frame that matches the second selection condition.
　さらに、図２のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。 Furthermore, in the flowchart of FIG. 2, the processing is ended by powering off or interruption for aborting the processing.
　次に、ステップＳ２０４のフレーム間変化情報取得処理の第一の例について、図３のフローチャートを用いて説明する。図３のフローチャートにおいて、フレーム間変化情報の取得処理は、上述したピクセル比較処理を例として説明する。また、本フローチャートにおいて、フレーム間変化情報の取得処理の対象の２つの時間的に連続するフレームをフレーム１、フレーム２ということとする。また、映像中において、フレーム１の次にフレーム２が存在する、とする。 Next, a first example of the inter-frame change information acquisition process in step S204 will be described using the flowchart of FIG. In the flowchart of FIG. 3, the inter-frame change information acquisition process will be described using the above-described pixel comparison process as an example. Also, in this flowchart, two temporally continuous frames that are targets of the inter-frame change information acquisition process are referred to as frame 1 and frame 2. Also, assume that frame 2 exists after frame 1 in the video.
　（ステップＳ３０１）変化情報取得部１３１は、カウンタｉに１を代入する。また、変化情報取得部１３１は、変数「エラー数」に０を代入する。 (Step S301) The change information acquisition unit 131 assigns 1 to the counter i. Also, the change information acquisition unit 131 substitutes 0 for the variable “number of errors”.
　（ステップＳ３０２）変化情報取得部１３１は、フレーム１またはフレーム２にｉ番目のピクセルが存在するか否かを判断する。ｉ番目のピクセルが存在する場合はステップＳ３０３に行き、ｉ番目のピクセルが存在しない場合はステップＳ３０９に行く。なお、変化情報取得部１３１は、例えば、フレーム１またはフレーム２のピクセルを順に走査し、ｉ番目のピクセルを取得する。 (Step S302) The change information acquisition unit 131 determines whether or not the i-th pixel exists in the frame 1 or the frame 2. When the i-th pixel exists, the process goes to step S303, and when the i-th pixel does not exist, the process goes to step S309. Note that the change information acquisition unit 131 sequentially scans pixels in frame 1 or frame 2, for example, and acquires the i-th pixel.
　（ステップＳ３０３）変化情報取得部１３１は、フレーム１のｉ番目のピクセルの色値を取得する。 (Step S303) The change information acquisition unit 131 acquires the color value of the i-th pixel of the frame 1.
　（ステップＳ３０４）変化情報取得部１３１は、フレーム２のｉ番目のピクセルの色値を取得する。なお、フレーム１のｉ番目のピクセルのフレーム内の座標位置とフレーム２のｉ番目のピクセルのフレーム内の座標位置とは同じである。 (Step S304) The change information acquisition unit 131 acquires the color value of the i-th pixel of frame 2. The coordinate position in the frame of the i-th pixel in frame 1 is the same as the coordinate position in the frame of the i-th pixel in frame 2.
　（ステップＳ３０５）変化情報取得部１３１は、ステップＳ３０３およびステップＳ３０４で取得した２つの色値から、距離を算出する。かかる算出方法は、上述した数式１である。 (Step S305) The change information acquisition unit 131 calculates a distance from the two color values acquired in Step S303 and Step S304. This calculation method is Equation 1 described above.
　（ステップＳ３０６）変化情報取得部１３１は、ステップＳ３０５で取得した距離が閾値以上であるか否かを判断する。距離が閾値以上であればステップＳ３０７に行き、距離が閾値未満であればステップＳ３０８に行く。 (Step S306) The change information acquisition unit 131 determines whether or not the distance acquired in step S305 is greater than or equal to a threshold value. If the distance is greater than or equal to the threshold, the process goes to step S307, and if the distance is less than the threshold, the process goes to step S308.
　（ステップＳ３０７）変化情報取得部１３１は、変数「エラー数」に１を加える。 (Step S307) The change information acquisition unit 131 adds 1 to the variable “number of errors”.
　（ステップＳ３０８）変化情報取得部１３１は、カウンタｉを１、インクリメントする。 (Step S308) The change information acquisition unit 131 increments the counter i by one.
　（ステップＳ３０９）変化情報取得部１３１は、フレーム間変化情報に変数「エラー数」の値を代入する。 (Step S309) The change information acquisition unit 131 assigns the value of the variable “number of errors” to the interframe change information.
　なお、図３のフローチャートにおいて、ピクセルの色値を用いて、フレーム間変化情報を取得した。しかし、図３のフローチャートにおいて、ピクセルの他の特徴量（属性値と言っても良い）を用いて、２つのピクセル間の距離（差異と言っても良い）を算出し、かかる距離を用いて、フレーム間変化情報を取得しても良い。なお、ピクセルの他の特徴量とは、例えば、輝度、明度である。 In addition, in the flowchart of FIG. 3, the inter-frame change information was acquired using the color value of the pixel. However, in the flowchart of FIG. 3, the distance between two pixels (which may be referred to as a difference) is calculated using another feature amount (which may be referred to as an attribute value) of the pixel, and the distance is used. Inter-frame change information may be acquired. In addition, the other feature amount of the pixel is, for example, luminance and brightness.
　次に、ステップＳ２０４のフレーム間変化情報取得処理の第二の例について、図４のフローチャートを用いて説明する。図４のフローチャートにおいて、フレーム間変化情報の取得処理は、上述した分割領域比較処理を例として説明する。また、本フローチャートにおいて、フレーム間変化情報の取得処理の対象の２つの連続するフレームをフレーム１、フレーム２ということとする。また、映像中において、フレーム１の次にフレーム２が存在する、とする。 Next, a second example of the inter-frame change information acquisition process in step S204 will be described using the flowchart of FIG. In the flowchart of FIG. 4, the inter-frame change information acquisition process will be described using the above-described divided region comparison process as an example. Also, in this flowchart, two consecutive frames to be subjected to the inter-frame change information acquisition process are referred to as “frame 1” and “frame 2”. Also, assume that frame 2 exists after frame 1 in the video.
　（ステップＳ４０１）変化情報取得部１３１は、カウンタｉに１を代入する。 (Step S401) The change information acquisition unit 131 assigns 1 to the counter i.
　（ステップＳ４０２）変化情報取得部１３１は、フレーム１またはフレーム２にｉ番目の分割領域が存在するか否かを判断する。ｉ番目の分割領域が存在する場合はステップＳ４０３に行き、ｉ番目の分割領域が存在しない場合はステップＳ４０８に行く。なお、格納部１１に、２以上の各分割領域を特定する分割領域特定（例えば、領域の左上座標と右下座標）が格納されている。そして、変化情報取得部１３１は、格納部１１の分割領域特定情報を順に取得していき、ｉ番目の分割領域が存在するか否か（ｉ番目の分割領域特定情報が格納部１１に存在するか否か）を判断する。 (Step S402) The change information acquisition unit 131 determines whether or not the i-th divided region exists in the frame 1 or the frame 2. When the i-th divided area exists, the process goes to step S403, and when the i-th divided area does not exist, the process goes to step S408. The storage unit 11 stores division area specification (for example, upper left coordinates and lower right coordinates) for specifying two or more division areas. Then, the change information acquisition unit 131 sequentially acquires the divided area specifying information of the storage unit 11 and determines whether or not the i th divided area exists (the i th divided area specifying information exists in the storage unit 11). Whether or not).
　（ステップＳ４０３）変化情報取得部１３１は、フレーム１のｉ番目の分割領域の１以上の特徴量を取得する。なお、１以上の特徴量は、例えば、ｉ番目の分割領域の各ピクセルの色値の平均値、ｉ番目の分割領域の各ピクセルの輝度の平均値、ｉ番目の分割領域の色ヒストグラムの情報等である。また、変化情報取得部１３１は、例えば、ｉ番目の分割領域特定情報を格納部１１から取得する。そして、変化情報取得部１３１は、例えば、当該分割領域特定情報が示す領域の画像から１以上の特徴量を取得する。 (Step S403) The change information acquisition unit 131 acquires one or more feature amounts of the i-th divided region of the frame 1. Note that the one or more feature amounts include, for example, an average value of color values of pixels in the i-th divided area, an average value of luminance values of pixels in the i-th divided area, and information on the color histogram of the i-th divided area. Etc. In addition, the change information acquisition unit 131 acquires, for example, i-th divided area specifying information from the storage unit 11. Then, for example, the change information acquisition unit 131 acquires one or more feature amounts from the image of the area indicated by the divided area specifying information.
　（ステップＳ４０４）変化情報取得部１３１は、フレーム２のｉ番目の分割領域の１以上の特徴量を取得する。 (Step S404) The change information acquisition unit 131 acquires one or more feature amounts of the i-th divided region of the frame 2.
　（ステップＳ４０５）変化情報取得部１３１は、ステップＳ４０３で取得した１以上の特徴量とステップＳ４０４で取得した１以上の特徴量とを用いて、各特徴量の差を取得する。つまり、例えば、変化情報取得部１３１は、ステップＳ４０３で取得したフレーム１の色値の平均値とテップＳ４０４で取得したフレーム２の色値の平均値との差異を取得し、かつフレーム１の輝度の平均値とフレーム２の輝度の平均値との差異を取得する。 (Step S405) The change information acquisition unit 131 acquires a difference between the feature amounts using the one or more feature amounts acquired in step S403 and the one or more feature amounts acquired in step S404. That is, for example, the change information acquisition unit 131 acquires the difference between the average value of the color value of frame 1 acquired in step S403 and the average value of the color value of frame 2 acquired in step S404, and the luminance of the frame 1 And the average value of the luminance of frame 2 are obtained.
　（ステップＳ４０６）変化情報取得部１３１は、ステップＳ４０５で取得した１以上の差の情報から、ｉ番目の分割領域の分割領域変化情報を取得する。変化情報取得部１３１は、ステップＳ４０５で取得した１以上の差の情報が大きな差を示す情報であるほど、ｉ番目の分割領域の分割領域変化情報が大きな情報となるように、分割領域変化情報を取得する。 (Step S406) The change information acquisition unit 131 acquires the divided area change information of the i-th divided area from the one or more difference information acquired in step S405. The change information acquisition unit 131 divides the region change information so that the information indicating that the one or more difference information acquired in step S405 indicates a larger difference, the larger the information on the region change information of the i-th region. To get.
　（ステップＳ４０７）変化情報取得部１３１は、カウンタｉを１、インクリメントする。ステップＳ４０２に戻る。 (Step S407) The change information acquisition unit 131 increments the counter i by one. The process returns to step S402.
　（ステップＳ４０８）変化情報取得部１３１は、ステップＳ４０６で取得した２以上の各分割領域の分割領域変化情報を用いて、フレーム間変化情報を取得する。上位処理にリターンする。ここで、変化情報取得部１３１は、２以上の分割領域変化情報の平均値や中央値をフレーム間変化情報として取得しても良いし、２以上の分割領域変化情報の最大値をフレーム間変化情報として取得しても良い。つまり、分割領域変化情報が大きな値を示す場合ほど、大きな値のフレーム間変化情報を取得すれば良い。 (Step S408) The change information acquisition unit 131 acquires inter-frame change information using the divided area change information of each of the two or more divided areas acquired in step S406. Return to upper process. Here, the change information acquisition unit 131 may acquire the average value or median value of two or more divided region change information as inter-frame change information, or the maximum value of two or more divided region change information may be changed between frames. It may be acquired as information. That is, the larger the inter-frame change information is acquired, the more the divided region change information indicates a larger value.
　以下、本実施の形態におけるダイジェスト映像取得装置１の具体的な動作について説明する。 Hereinafter, a specific operation of the digest video acquisition apparatus 1 in the present embodiment will be described.
　今、映像格納部１１１に一の映像が格納されている。そして、ユーザは、ダイジェスト映像取得装置１に、部分映像数「５」を有する開始指示を入力した、とする。なお、一の映像は、例えば、フレーム番号０からフレーム番号１７９９９の１８０００フレームを有する映像である、とする。 Now, one video is stored in the video storage unit 111. Then, it is assumed that the user inputs a start instruction having a partial video number “5” to the digest video acquisition device 1. Note that one video is, for example, a video having 18000 frames from frame number 0 to frame number 17999.
　次に、受付部１２は、開始指示を受け付ける。そして、変化情報取得部１３１は、フレーム番号０に対応付けて、フレーム間変化情報「－１」を格納部１１に付加する。 Next, the receiving unit 12 receives a start instruction. Then, the change information acquisition unit 131 adds inter-frame change information “−1” to the storage unit 11 in association with the frame number 0.
　そして、次に、変化情報取得部１３１は、映像格納部１１１の映像の中のフレーム番号０とフレーム番号１を取得する。そして、変化情報取得部１３１は、フレーム番号０からフレーム番号１への変換の度合いを示すフレーム間変化情報を、例えば、上述した分割領域比較処理により取得する。ここでは、変化情報取得部１３１は、フレーム番号０とフレーム番号１の各分割領域の分割領域変化情報を取得し、当該各分割領域の分割領域変化情報を用いて、正規化したフレーム間変化情報「１」を取得した、とする。そして、変化情報取得部１３１は、フレーム番号１に対応付けて、フレーム間変化情報「１」を格納部１１に付加する。なお、変化情報取得部１３１は、「０」から「９」のいずれかの整数のフレーム間変化情報を取得する、とする。 Then, the change information acquisition unit 131 acquires frame number 0 and frame number 1 in the video in the video storage unit 111. Then, the change information acquisition unit 131 acquires inter-frame change information indicating the degree of conversion from frame number 0 to frame number 1 by, for example, the divided region comparison process described above. Here, the change information acquisition unit 131 acquires the divided region change information of each divided region of frame number 0 and frame number 1, and uses the divided region change information of each divided region to normalize the inter-frame change information. It is assumed that “1” has been acquired. Then, the change information acquisition unit 131 adds the inter-frame change information “1” to the storage unit 11 in association with the frame number 1. It is assumed that the change information acquisition unit 131 acquires inter-frame change information of any integer from “0” to “9”.
　同様に、変化情報取得部１３１は、フレーム番号１とフレーム番号２との間のフレーム間変化情報「２」を取得した、とする。そして、変化情報取得部１３１は、フレーム番号２に対応付けて、フレーム間変化情報「２」を格納部１１に蓄積する。 Similarly, it is assumed that the change information acquisition unit 131 has acquired inter-frame change information “2” between frame number 1 and frame number 2. Then, the change information acquisition unit 131 stores the interframe change information “2” in the storage unit 11 in association with the frame number 2.
　また、変化情報取得部１３１は、フレーム番号２とフレーム番号３との間のフレーム間変化情報「７」を取得した、とする。そして、変化情報取得部１３１は、フレーム番号３に対応付けて、フレーム間変化情報「７」を格納部１１に蓄積する。 Also, it is assumed that the change information acquisition unit 131 has acquired inter-frame change information “7” between frame number 2 and frame number 3. Then, the change information acquisition unit 131 stores the inter-frame change information “7” in the storage unit 11 in association with the frame number 3.
　変化情報取得部１３１は、以上の処理を、映像の最終フレームまで行う。そして、変化情報取得部１３１は、図５に示す概念のフレーム間変化情報を算出した、とする。また、変化情報取得部１３１は、図６に示すフレーム間変化情報管理表の「ＩＤ」「フレーム番号」「フレーム間変化情報」の情報を蓄積した、とする。なお、フレーム間変化情報管理表は、「ＩＤ」「フレーム番号」「フレーム間変化情報」「開始フレームフラグ」「終了フレームフラグ」を有するレコードをフレーム数だけ保持している。「開始フレームフラグ」は開始フレームか否かを示すフラグであり、「終了フレームフラグ」は終了フレームか否かを示すフラグである。 The change information acquisition unit 131 performs the above processing up to the final frame of the video. Then, it is assumed that the change information acquisition unit 131 has calculated inter-frame change information of the concept illustrated in FIG. Further, it is assumed that the change information acquisition unit 131 has accumulated the information of “ID”, “frame number”, and “interframe change information” in the interframe change information management table shown in FIG. The inter-frame change information management table holds records having “ID”, “frame number”, “inter-frame change information”, “start frame flag”, and “end frame flag” for the number of frames. The “start frame flag” is a flag indicating whether it is a start frame, and the “end frame flag” is a flag indicating whether it is an end frame.
　次に、フレーム選択手段１３２１は、フレーム間変化情報の値が上位５つの開始フレームを選択する。ここで、フレーム選択手段１３２１は、開始フレームとして、フレーム間変化情報の値が「９」のフレーム番号「６」「２５１７」「４５１０」「８３２１」「１２５４８」を選択した、とする。そして、フレーム選択手段１３２１は、開始フレームのフレーム番号に対応付けて、開始フラグ「１」を蓄積する。なお、フレーム選択手段１３２１は、開始フレーム以外のフレーム番号には、開始フラグ「０」を蓄積する、とする。なお、開始フラグ「１」は開始フラグであることを示し、開始フラグ「０」は開始フラグでないことを示す。また、同一のフレーム間変化情報に対応するすべてのフレームを開始フレームとして採用すると、部分映像数を超える部分映像を取得する場合、フレーム選択手段１３２１は、極力、間が均等になるように、開始フラグを選択することは好適である。 Next, the frame selection means 1321 selects the top five start frames having inter-frame change information values. Here, it is assumed that the frame selection unit 1321 has selected the frame numbers “6”, “2517”, “4510”, “8321”, and “12548” whose interframe change information value is “9” as the start frame. Then, the frame selection unit 1321 accumulates the start flag “1” in association with the frame number of the start frame. It is assumed that the frame selection unit 1321 stores the start flag “0” in frame numbers other than the start frame. The start flag “1” indicates a start flag, and the start flag “0” indicates that it is not a start flag. Also, if all frames corresponding to the same inter-frame change information are adopted as start frames, when acquiring partial videos exceeding the number of partial videos, the frame selection means 1321 starts so that the intervals are as even as possible. It is preferable to select a flag.
　次に、部分映像取得手段１３２２は、各開始フレームごとに、例えば、以下のように終了フレームを決定する。部分映像取得手段１３２２は、例えば、シーンの長さに応じた長さの部分映像となるように、終了フレームを決定する。部分映像取得手段１３２２は、例えば、１番目の部分映像のフレーム数「２５１７－６＋１＝２５１２」、２番目の部分映像のフレーム数「４５１０－２５１７＋１＝１９９４」、３番目の部分映像のフレーム数「８３２１－４５１０＋１＝３８１２」、４番目の部分映像のフレーム数「１２５４８－８３２１＋１＝４２２８」、５番目の部分映像のフレーム数「最終のフレーム番号（例えば、１７７９９９－１２５４８＋１＝５４５２」を得る。そして、部分映像取得手段１３２２は、例えば、概ね「２５１２：１９９４：３８１２：４２２８：５４５２」の比に、部分映像の長さがなるように、終了フレームを決定する。例えば、部分映像取得手段１３２２は、開始フレーム「６」に対応する終了フレームとしてフレーム番号「５０８」を得る。そして、部分映像取得手段１３２２は、フレーム番号「５０８」に対応付けて終了フレームフラグ「１」を書き込む。また、例えば、部分映像取得手段１３２２は、開始フレーム「２５１７」に対応する終了フレームとしてフレーム番号「２９１６」を得る。そして、部分映像取得手段１３２２は、フレーム番号「２９１６」に対応付けて終了フレームフラグ「１」を書き込む。また、例えば、部分映像取得手段１３２２は、開始フレーム「４５１０」に対応する終了フレームとしてフレーム番号「５２７２」を得る。そして、部分映像取得手段１３２２は、フレーム番号「５２７２」に対応付けて終了フレームフラグ「１」を書き込む。また、例えば、部分映像取得手段１３２２は、開始フレーム「８３２１」に対応する終了フレームとしてフレーム番号「９１６７」を得る。そして、部分映像取得手段１３２２は、フレーム番号「９１６７」に対応付けて終了フレームフラグ「１」を書き込む。また、部分映像取得手段１３２２は、映像の最終フレームに対応付けて終了フレームフラグ「１」を書き込む。なお、終了フレームではないフレームに対しては、終了フレームフラグ「０」が書き込まれる、とする。 Next, the partial video acquisition unit 1322 determines an end frame for each start frame, for example, as follows. The partial video acquisition unit 1322 determines the end frame so that the partial video has a length corresponding to the length of the scene, for example. For example, the partial video acquisition unit 1322 has the number of frames of the first partial video “2517-6 + 1 = 2512”, the number of frames of the second partial video “4510-2517 + 1 = 1994”, and the number of frames of the third partial video “ 8321-4510 + 1 = 3812 ”, the number of frames of the fourth partial video“ 12548-8321 + 1 = 4228 ”, and the number of frames of the fifth partial video“ final frame number (for example, 177999-12548 + 1 = 5452) ”. For example, the partial video acquisition unit 1322 determines the end frame so that the length of the partial video becomes approximately the ratio of “2512: 1994: 3812: 4228: 5452”, for example, the partial video acquisition unit 1322 Frame number “508” as the end frame corresponding to start frame “6” Then, the partial video acquisition unit 1322 writes the end frame flag “1” in association with the frame number “508.” For example, the partial video acquisition unit 1322 stores the end frame corresponding to the start frame “2517”. The partial video acquisition unit 1322 writes the end frame flag “1” in association with the frame number “2916.” For example, the partial video acquisition unit 1322 includes the start frame “2916”. The frame number “5272” is obtained as the end frame corresponding to “4510.” Then, the partial video acquisition unit 1322 writes the end frame flag “1” in association with the frame number “5272”. The means 1322 uses the end frame corresponding to the start frame “8321”. Then, the frame number “9167” is obtained, and the partial video acquisition unit 1322 writes the end frame flag “1” in association with the frame number “9167.” Also, the partial video acquisition unit 1322 displays the final frame of the video. The end frame flag “1” is written in association with the end frame flag, and the end frame flag “0” is written for a frame that is not the end frame.
　なお、部分映像取得手段１３２２は、上記で算出した終了フレームのフレーム番号に対応するフレーム間変化情報が閾値以上の場合、当該フレーム番号の前または後であり、フレーム間変化情報が示す変化の傾向が予め決められた変化より少ないフレームを終了フレームとして選択することは好適である。 If the inter-frame change information corresponding to the frame number of the end frame calculated above is equal to or greater than the threshold, the partial video acquisition unit 1322 is before or after the frame number, and the change tendency indicated by the inter-frame change information. It is preferable to select a frame whose number is less than a predetermined change as an end frame.
　また、上記の場合、ダイジェスト映像のフレーム数（再生時間でも良い）が予め格納部１１に格納されている、とする。また、ダイジェスト映像のフレーム数（再生時間でも良い）がユーザにより指定されても良い。 Also, in the above case, it is assumed that the number of frames (or playback time) of the digest video is stored in the storage unit 11 in advance. In addition, the number of frames (or playback time) of the digest video may be designated by the user.
　そして、次に、蓄積部１３３は、図６の開始フレームフラグ「１」に対応するフレームから、次の終了フレーム「１」に対応するフレームまでの映像を部分映像として取得する。次に、蓄積部１３３は、取得した５つの部分映像を連結し、ダイジェスト映像を構成し、当該ダイジェスト映像をダイジェスト映像格納部１１３に蓄積する。 Then, the accumulating unit 133 acquires videos from the frame corresponding to the start frame flag “1” in FIG. 6 to the frame corresponding to the next end frame “1” as a partial video. Next, the storage unit 133 concatenates the acquired five partial videos, forms a digest video, and stores the digest video in the digest video storage unit 113.
　以上のダイジェスト映像の生成処理の後、ダイジェスト映像取得装置１は、ユーザの端末装置から、ダイジェスト映像送信指示を受信した、とする。 It is assumed that the digest video acquisition apparatus 1 has received a digest video transmission instruction from the user terminal device after the above digest video generation processing.
　次に、処理部１３は、受信されたダイジェスト映像送信指示に対応するダイジェスト映像を取得する。ここで、処理部１３は、ダイジェスト映像格納部１１３からダイジェスト映像を読み出しても良いし、図６の管理表を用いて、映像格納部１１１の映像からダイジェスト映像を構成しても良い。 Next, the processing unit 13 acquires a digest video corresponding to the received digest video transmission instruction. Here, the processing unit 13 may read the digest video from the digest video storage unit 113, or may construct the digest video from the video in the video storage unit 111 using the management table of FIG.
　次に、送信部１４は、取得されたダイジェスト映像を、ダイジェスト映像送信指示を送信した端末装置に送信する。 Next, the transmission unit 14 transmits the obtained digest video to the terminal device that has transmitted the digest video transmission instruction.
　以上、本実施の形態によれば、フレーム間変化情報を用いてダイジェスト映像を取得するため、適切なダイジェスト映像を取得できる。 As described above, according to the present embodiment, since the digest video is acquired using the inter-frame change information, an appropriate digest video can be acquired.
　なお、本実施の形態において、部分映像取得部１３２が取得する２つの部分映像が、映像の中で連続していても良い。つまり、部分映像の終了フレームの次のフレームが、次の部分映像の開始フレームであっても良い。 In the present embodiment, two partial videos acquired by the partial video acquisition unit 132 may be continuous in the video. That is, the frame next to the end frame of the partial video may be the start frame of the next partial video.
　また、本実施の形態の具体例において、部分映像数を用いて、部分映像を取得した。つまり、上記具体例において、第一選択条件は、「フレーム間変化情報の値が上位Ｎに対応するフレーム間の変化後のフレームを開始フレームとして選択すること」であった。しかし、上述したように、第一選択条件は、「フレーム間変化情報が閾値以上または閾値より大きいフレーム間の変化後のフレームを開始フレームとして選択すること」等の他の条件でも良いことは言うまでもない。 Further, in the specific example of the present embodiment, the partial video is obtained using the number of partial videos. That is, in the above specific example, the first selection condition is “select the frame after the change between frames corresponding to the top N as the value of the interframe change information as the start frame”. However, as described above, it goes without saying that the first selection condition may be other conditions such as “select a frame after change between frames whose interframe change information is equal to or greater than a threshold value or greater than the threshold value”. Yes.
　また、本実施の形態における処理は、ソフトウェアで実現しても良い。そして、このソフトウェアをソフトウェアダウンロード等により配布しても良い。また、このソフトウェアをＣＤ－ＲＯＭなどの記録媒体に記録して流布しても良い。なお、このことは、本明細書における他の実施の形態においても該当する。なお、本実施の形態におけるダイジェスト映像取得装置１を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、コンピュータを、映像を構成する２以上のフレームのうちの２以上のフレーム間の変化を示す情報であるフレーム間変化情報を取得する変化情報取得部と、前記フレーム間変化情報を用いて、前記受付部が受け付けた映像の一部である１または２以上の部分映像を取得する部分映像取得部と、前記部分映像取得部が取得した１以上の部分映像を有するダイジェスト映像を蓄積する蓄積部として機能させるためのプログラムである。 Further, the processing in the present embodiment may be realized by software. Then, this software may be distributed by software download or the like. Further, this software may be recorded on a recording medium such as a CD-ROM and distributed. This also applies to other embodiments in this specification. In addition, the software which implement | achieves the digest image | video acquisition apparatus 1 in this Embodiment is the following programs. That is, this program causes a computer to change information acquisition unit for acquiring change information between frames, which is information indicating a change between two or more frames of two or more frames constituting a video, and the change information between frames. A partial video acquisition unit that acquires one or more partial videos that are part of the video received by the reception unit, and a digest video that includes the one or more partial videos acquired by the partial video acquisition unit It is a program for functioning as an accumulating unit for accumulating.
　また、上記プログラムにおいて、前記部分映像取得部は、前記フレーム間変化情報が予め決められた条件を満たすほど大きな変化を示す情報である場合、当該フレーム間変化情報に対応するフレームを含む１以上の部分映像を取得するものとして、コンピュータを機能させるプログラムであることは好適である。 In the program, the partial video acquisition unit may include one or more frames including the frame corresponding to the inter-frame change information when the inter-frame change information is information indicating a change that is large enough to satisfy a predetermined condition. A program that causes a computer to function as the partial video acquisition is preferable.
　また、上記プログラムにおいて、前記変化情報取得部は、２つのフレーム間の変化に関する２以上の特徴量を取得し、当該２以上の特徴量を用いて、フレーム間変化情報を取得するものとして、コンピュータを機能させるプログラムであることは好適である。 In the above program, the change information acquisition unit acquires two or more feature amounts related to a change between two frames, and acquires inter-frame change information using the two or more feature amounts. It is preferable that the program is a function that functions.
　また、上記プログラムにおいて、コンピュータを、部分映像の数である部分映像数を受け付ける受付部としてさらに機能させ、前記部分映像取得部は、前記部分映像数の部分映像を取得するものとして、コンピュータを機能させるプログラムであることは好適である。 In the above program, the computer further functions as a reception unit that receives the number of partial videos, which is the number of partial videos, and the partial video acquisition unit functions as a computer that acquires partial videos of the number of partial videos. It is preferable that the program is to be executed.
　また、上記プログラムにおいて、前記部分映像取得部は、部分映像の開始フレームを選択するための第一選択条件に合致する１以上のフレームを選択するフレーム選択手段と、前記フレーム選択手段が選択した１以上の各フレームを開始フレームとする１以上の部分映像を取得する部分映像取得手段とを具備するものとして、コンピュータを機能させるプログラムであることは好適である。 In the above program, the partial video acquisition unit selects a frame selection unit that selects one or more frames that meet a first selection condition for selecting a start frame of the partial video, and the frame selection unit selects the 1 selected by the frame selection unit. A program that causes a computer to function is preferable as including a partial video acquisition unit that acquires one or more partial videos having each of the above frames as a start frame.
　また、上記プログラムにおいて、前記部分映像取得手段は、前記開始フレームと次の開始フレームまたは映像の終了フレームとまでの２以上の各シーンから、シーンの長さに応じた長さの部分映像を取得するものとして、コンピュータを機能させるプログラムであることは好適である。 In the above program, the partial video acquisition means acquires a partial video having a length corresponding to the length of the scene from two or more scenes from the start frame and the next start frame or video end frame. It is preferable that the program is a program that causes a computer to function.
　また、上記プログラムにおいて、前記部分映像取得手段は、前記開始フレームと次の開始フレームまたは映像の終了フレームとまでの２以上の各シーンから、一定長の部分映像を取得する
ものとして、コンピュータを機能させるプログラムであることは好適である。 In the above program, the partial video acquisition means functions as a computer that acquires a partial video of a certain length from each of two or more scenes from the start frame and the next start frame or video end frame. It is preferable that the program is to be executed.
　また、上記プログラムにおいて、前記部分映像取得手段は、部分映像の終了フレームを選択するための第二選択条件に合致する１以上のフレームを選択し、前記開始フレームから前記選択した終了フレームまでの部分映像を取得するものとして、コンピュータを機能させるプログラムであることは好適である。 In the above program, the partial video acquisition means selects one or more frames that match a second selection condition for selecting an end frame of the partial video, and a portion from the start frame to the selected end frame. A program that causes a computer to function as the video acquisition is suitable.
　また、図７は、本明細書で述べたプログラムを実行して、上述した種々の実施の形態のダイジェスト映像取得装置１等を実現するコンピュータの外観を示す。上述の実施の形態は、コンピュータハードウェア及びその上で実行されるコンピュータプログラムで実現され得る。図７は、このコンピュータシステム３００の概観図であり、図８は、システム３００のブロック図である。 FIG. 7 shows the external appearance of a computer that executes the program described in this specification to realize the digest video acquisition apparatus 1 and the like of the various embodiments described above. The above-described embodiments can be realized by computer hardware and a computer program executed thereon. FIG. 7 is an overview diagram of the computer system 300, and FIG. 8 is a block diagram of the system 300.
　図７において、コンピュータシステム３００は、ＣＤ－ＲＯＭドライブを含むコンピュータ３０１と、キーボード３０２と、マウス３０３と、モニタ３０４とを含む。 In FIG. 7, a computer system 300 includes a computer 301 including a CD-ROM drive, a keyboard 302, a mouse 303, and a monitor 304.
　図８において、コンピュータ３０１は、ＣＤ－ＲＯＭドライブ３０１２に加えて、ＭＰＵ３０１３と、ＣＤ－ＲＯＭドライブ３０１２等に接続されたバス３０１４と、ブートアッププログラム等のプログラムを記憶するためのＲＯＭ３０１５と、ＭＰＵ３０１３に接続され、アプリケーションプログラムの命令を一時的に記憶するとともに一時記憶空間を提供するためのＲＡＭ３０１６と、アプリケーションプログラム、システムプログラム、及びデータを記憶するためのハードディスク３０１７とを含む。ここでは、図示しないが、コンピュータ３０１は、さらに、ＬＡＮへの接続を提供するネットワークカードを含んでも良い。 In FIG. 8, in addition to the CD-ROM drive 3012, the computer 301 stores an MPU 3013, a bus 3014 connected to the CD-ROM drive 3012, a ROM 3015 for storing programs such as a bootup program, and the MPU 3013. It includes a RAM 3016 for temporarily storing application program instructions and providing a temporary storage space, and a hard disk 3017 for storing application programs, system programs, and data. Although not shown here, the computer 301 may further include a network card that provides connection to a LAN.
　コンピュータシステム３００に、上述した実施の形態のダイジェスト映像取得装置１等の機能を実行させるプログラムは、ＣＤ－ＲＯＭ３１０１に記憶されて、ＣＤ－ＲＯＭドライブ３０１２に挿入され、さらにハードディスク３０１７に転送されても良い。これに代えて、プログラムは、図示しないネットワークを介してコンピュータ３０１に送信され、ハードディスク３０１７に記憶されても良い。プログラムは実行の際にＲＡＭ３０１６にロードされる。プログラムは、ＣＤ－ＲＯＭ３１０１またはネットワークから直接、ロードされても良い。 A program that causes the computer system 300 to execute the functions of the digest video acquisition device 1 and the like of the above-described embodiment is stored in the CD-ROM 3101, inserted into the CD-ROM drive 3012, and further transferred to the hard disk 3017. good. Alternatively, the program may be transmitted to the computer 301 via a network (not shown) and stored in the hard disk 3017. The program is loaded into the RAM 3016 at the time of execution. The program may be loaded directly from the CD-ROM 3101 or the network.
　プログラムは、コンピュータ３０１に、上述した実施の形態のダイジェスト映像取得装置等の機能を実行させるオペレーティングシステム（ＯＳ）、またはサードパーティープログラム等は、必ずしも含まなくても良い。プログラムは、制御された態様で適切な機能（モジュール）を呼び出し、所望の結果が得られるようにする命令の部分のみを含んでいれば良い。コンピュータシステム３００がどのように動作するかは周知であり、詳細な説明は省略する。 The program does not necessarily include an operating system (OS) or a third-party program that causes the computer 301 to execute the functions of the digest video acquisition device according to the above-described embodiment. The program only needs to include an instruction portion that calls an appropriate function (module) in a controlled manner and obtains a desired result. How the computer system 300 operates is well known and will not be described in detail.
　なお、上記プログラムにおいて、情報を送信するステップや、情報を受信するステップなどでは、ハードウェアによって行われる処理、例えば、送信ステップにおけるモデムやインターフェースカードなどで行われる処理（ハードウェアでしか行われない処理）は含まれない。 In the above program, in the step of transmitting information, the step of receiving information, etc., processing performed by hardware, for example, processing performed by a modem or an interface card in the transmission step (only performed by hardware) Processing) is not included.
　また、上記プログラムを実行するコンピュータは、単数であってもよく、複数であってもよい。すなわち、集中処理を行ってもよく、あるいは分散処理を行ってもよい。 Further, the computer that executes the program may be singular or plural. That is, centralized processing may be performed, or distributed processing may be performed.
　また、上記各実施の形態において、一の装置に存在する２以上の通信手段は、物理的に一の媒体で実現されても良いことは言うまでもない。 Further, in each of the above embodiments, it goes without saying that two or more communication means existing in one apparatus may be physically realized by one medium.
　また、上記各実施の形態において、各処理は、単一の装置によって集中処理されることによって実現されてもよく、あるいは、複数の装置によって分散処理されることによって実現されてもよい。 In each of the above embodiments, each process may be realized by centralized processing by a single device, or may be realized by distributed processing by a plurality of devices.
　本発明は、以上の実施の形態に限定されることなく、種々の変更が可能であり、それらも本発明の範囲内に包含されるものであることは言うまでもない。 The present invention is not limited to the above-described embodiment, and various modifications are possible, and it goes without saying that these are also included in the scope of the present invention.
　以上のように、本発明にかかるダイジェスト映像取得装置は、映像から一部を抽出した適切なダイジェスト映像を取得できる、という効果を有し、ダイジェスト映像取得装置等として有用である。 As described above, the digest video acquisition device according to the present invention has an effect that an appropriate digest video obtained by extracting a part from the video can be acquired, and is useful as a digest video acquisition device and the like.

Claims (10)

  1. 映像を構成する２以上のフレームのうちの２以上のフレーム間の変化を示す情報であるフレーム間変化情報を取得する変化情報取得部と、
    前記フレーム間変化情報を用いて、前記映像の一部である１または２以上の部分映像を取得する部分映像取得部と、
    前記部分映像取得部が取得した１以上の部分映像を有するダイジェスト映像を蓄積する蓄積部とを具備するダイジェスト映像取得装置。     A change information acquisition unit that acquires inter-frame change information that is information indicating a change between two or more frames of two or more frames constituting a video;
    A partial video acquisition unit that acquires one or more partial videos that are part of the video using the inter-frame change information;
    A digest video acquisition apparatus comprising: a storage unit that stores a digest video having one or more partial videos acquired by the partial video acquisition unit.
  2. 前記部分映像取得部は、
    前記フレーム間変化情報が予め決められた条件を満たすほど大きな変化を示す情報である場合、当該フレーム間変化情報に対応するフレームを含む１以上の部分映像を取得する請求項１記載のダイジェスト映像取得装置。     The partial video acquisition unit
    2. The digest video acquisition according to claim 1, wherein when the inter-frame change information is information indicating a change that is large enough to satisfy a predetermined condition, one or more partial videos including a frame corresponding to the inter-frame change information are acquired. apparatus.
  3. 前記変化情報取得部は、
    ２つのフレーム間の変化に関する２以上の特徴量を取得し、当該２以上の特徴量を用いて、フレーム間変化情報を取得する請求項１または請求項２記載のダイジェスト映像取得装置。     The change information acquisition unit
    The digest video acquisition apparatus according to claim 1, wherein two or more feature amounts related to a change between two frames are acquired, and inter-frame change information is acquired using the two or more feature amounts.
  4. 部分映像の数である部分映像数を受け付ける受付部をさらに具備し、
    前記部分映像取得部は、
    前記部分映像数の部分映像を取得する請求項１記載のダイジェスト映像取得装置。     A reception unit that receives the number of partial videos, which is the number of partial videos;
    The partial video acquisition unit
    The digest video acquisition apparatus according to claim 1, wherein the partial video of the number of partial videos is acquired.
  5. 部分映像の開始フレームを選択するための第一選択条件が格納される選択条件格納部をさらに具備し、
    前記部分映像取得部は、
    前記第一選択条件に合致する１以上のフレームを選択するフレーム選択手段と、
    前記フレーム選択手段が選択した１以上の各フレームを開始フレームとする１以上の部分映像を取得する部分映像取得手段とを具備する請求項１記載記載のダイジェスト映像取得装置。     A selection condition storage unit for storing a first selection condition for selecting a start frame of the partial video;
    The partial video acquisition unit
    Frame selection means for selecting one or more frames that match the first selection condition;
    The digest video acquisition apparatus according to claim 1, further comprising: a partial video acquisition unit that acquires one or more partial videos having one or more frames selected by the frame selection unit as a start frame.
  6. 前記部分映像取得手段は、
    前記開始フレームと次の開始フレームまたは映像の終了フレームとまでの２以上の各シーンから、シーンの長さに応じた長さの部分映像を取得する請求項５記載のダイジェスト映像取得装置。     The partial video acquisition means includes
    The digest video acquisition apparatus according to claim 5, wherein a partial video having a length corresponding to a length of a scene is acquired from each of two or more scenes from the start frame to a next start frame or an end frame of the video.
  7. 前記部分映像取得手段は、
    前記開始フレームと次の開始フレームまたは映像の終了フレームとまでの２以上の各シーンから、一定長の部分映像を取得する請求項５記載のダイジェスト映像取得装置。     The partial video acquisition means includes
    The digest video acquisition apparatus according to claim 5, wherein a partial video having a predetermined length is acquired from each of two or more scenes from the start frame to a next start frame or an end frame of the video.
  8. 前記選択条件格納部は、
    部分映像の終了フレームを選択するための第二選択条件をも格納し、
    前記部分映像取得手段は、
    前記第二選択条件に合致する１以上のフレームを選択し、前記開始フレームから前記選択した終了フレームまでの部分映像を取得する請求項５から請求項７いずれか一項に記載のダイジェスト映像取得装置。     The selection condition storage unit
    The second selection condition for selecting the end frame of the partial video is also stored,
    The partial video acquisition means includes
    The digest video acquisition device according to any one of claims 5 to 7, wherein one or more frames that match the second selection condition are selected, and a partial video from the start frame to the selected end frame is acquired. .
  9. 変化情報取得部、部分映像取得部、および蓄積部により実現されるダイジェスト映像取得方法であって、
    前記変化情報取得部が、映像を構成する２以上のフレームのうちの２以上のフレーム間の変化を示す情報であるフレーム間変化情報を取得する変化情報取得ステップと、
    前記部分映像取得部が、前記フレーム間変化情報を用いて、前記映像の一部である１または２以上の部分映像を取得する部分映像取得ステップと、
    前記蓄積部が、前記部分映像取得ステップで取得された１以上の部分映像を有するダイジェスト映像を蓄積する蓄積ステップとを具備するダイジェスト映像取得方法。     A digest video acquisition method realized by a change information acquisition unit, a partial video acquisition unit, and a storage unit,
    A change information acquisition step in which the change information acquisition unit acquires inter-frame change information, which is information indicating a change between two or more frames of two or more frames constituting a video;
    A partial video acquisition step in which the partial video acquisition unit acquires one or more partial videos that are part of the video using the inter-frame change information;
    A digest video acquisition method comprising: a storage step in which the storage unit stores a digest video having one or more partial videos acquired in the partial video acquisition step.
  10. コンピュータを、
    映像を構成する２以上のフレームのうちの２以上のフレーム間の変化を示す情報であるフレーム間変化情報を取得する変化情報取得部と、
    前記フレーム間変化情報を用いて、前記映像の一部である１または２以上の部分映像を取得する部分映像取得部と、
    前記部分映像取得部が取得した１以上の部分映像を有するダイジェスト映像を蓄積する蓄積部として機能させるためのプログラムが記録された記録媒体。     Computer
    A change information acquisition unit that acquires inter-frame change information that is information indicating a change between two or more frames of two or more frames constituting a video;
    A partial video acquisition unit that acquires one or more partial videos that are part of the video using the inter-frame change information;
    A recording medium on which a program for causing a function to function as a storage unit that stores a digest video having one or more partial videos acquired by the partial video acquisition unit is recorded.
PCT/JP2017/025691 2016-07-19 2017-07-14 Digest video acquisition device, digest video acquisition method, and recording medium WO2018016434A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016-141801 2016-07-19
JP2016141801A JP6878718B2 (en) 2016-07-19 2016-07-19 Digest video acquisition device, digest video acquisition method, and program

Publications (1)

Publication Number Publication Date
WO2018016434A1 true WO2018016434A1 (en) 2018-01-25

Family

ID=60993021

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/025691 WO2018016434A1 (en) 2016-07-19 2017-07-14 Digest video acquisition device, digest video acquisition method, and recording medium

Country Status (2)

Country Link
JP (1) JP6878718B2 (en)
WO (1) WO2018016434A1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7166796B2 (en) * 2018-06-13 2022-11-08 キヤノン株式会社 Information processing device, information processing method, and program
US10917487B2 (en) 2019-01-14 2021-02-09 International Business Machines Corporation Generating notification digest based on user presence

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003101937A (en) * 2001-09-26 2003-04-04 Ricoh Co Ltd Video recording and reproducing device and video distribution system
WO2007039994A1 (en) * 2005-09-30 2007-04-12 Pioneer Corporation Digest generating device, and program therefor

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4323601B2 (en) * 1999-02-15 2009-09-02 キヤノン株式会社 Image processing system and image processing method
JP2004126811A (en) * 2002-09-30 2004-04-22 Toshiba Corp Content information editing device, and editing program for the same
JP4572771B2 (en) * 2005-08-03 2010-11-04 Ａｇｃ硝子建材株式会社 Support structure and support method for laminated plate member
JP2007158671A (en) * 2005-12-05 2007-06-21 Sony Corp Moving video recording and reproducing device, moving video recording and reproducing method, program of moving video recording and reproducing method, and record medium recorded with program of moving video recording and reproducing method
JP2009533993A (en) * 2006-04-20 2009-09-17 エヌエックスピー ビー ヴィ Data summarization system and data stream summarization method
WO2011099299A1 (en) * 2010-02-10 2011-08-18 パナソニック株式会社 Video extraction device, image capturing apparatus, program, and recording medium
JP2013239797A (en) * 2012-05-11 2013-11-28 Canon Inc Image processing device
JP2015103217A (en) * 2013-11-28 2015-06-04 ソニー株式会社 Image processing device and image processing method

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003101937A (en) * 2001-09-26 2003-04-04 Ricoh Co Ltd Video recording and reproducing device and video distribution system
WO2007039994A1 (en) * 2005-09-30 2007-04-12 Pioneer Corporation Digest generating device, and program therefor

Also Published As

Publication number Publication date
JP2018013879A (en) 2018-01-25
JP6878718B2 (en) 2021-06-02

Similar Documents

Publication Publication Date Title
US10956749B2 (en) Methods, systems, and media for generating a summarized video with video thumbnails
CN107534796B (en) Video processing system and digital video distribution system
JP6709986B2 (en) Luminance characteristic generation method
US7251790B1 (en) Media browsing system displaying thumbnails images based on preferences of plurality of users and placing the thumbnails images at a scene change
EP2464093B1 (en) Image file generation device, image processing device, image file generation method, and image processing method
US8213730B2 (en) Server, screen transmitting method, and program storage medium
US20150117540A1 (en) Coding apparatus, decoding apparatus, coding data, coding method, decoding method, and program
US20060126942A1 (en) Method of and apparatus for retrieving movie image
US10997694B2 (en) Method to generate additional level of detail when zooming in on an image
JP5424930B2 (en) Image editing apparatus, control method thereof, and program
JP2007124236A (en) Image processor, image processing method, and image processing program
WO2018016434A1 (en) Digest video acquisition device, digest video acquisition method, and recording medium
JP2006039753A (en) Image processing apparatus and image processing method
US7747130B2 (en) Apparatus and method for extracting representative still images from MPEG video
JP4656199B2 (en) Image processing apparatus, thumbnail movie creation method, and thumbnail movie creation program
CN110996173B (en) Image data processing method and device and storage medium
US10706891B2 (en) Video image processing apparatus and processing method
CN117176979B (en) Method, device, equipment and storage medium for extracting content frames of multi-source heterogeneous video
WO2014113915A1 (en) Mechanism for facilitating dynamic phase detection with high jitter tolerance for images of media streams
JP5944205B2 (en) Signal processing apparatus, signal processing method, and program
JP2011066483A (en) Apparatus, method and program for preparing moving picture thumbnail
JP6126463B2 (en) Image output apparatus, image output method, and program
CN115689888A (en) Image processing method, image processing device, electronic equipment and storage medium
KR20040035128A (en) Apparatus for generating thumbnail image of digital video
JP2002354219A (en) Method and device for embedding electronic watermark and program

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17830953

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17830953

Country of ref document: EP

Kind code of ref document: A1