JP2005328329A - Picture reproducer, picture recording-reproducing device and method of reproducing picture - Google Patents

Picture reproducer, picture recording-reproducing device and method of reproducing picture Download PDF

Info

Publication number
JP2005328329A
JP2005328329A JP2004144487A JP2004144487A JP2005328329A JP 2005328329 A JP2005328329 A JP 2005328329A JP 2004144487 A JP2004144487 A JP 2004144487A JP 2004144487 A JP2004144487 A JP 2004144487A JP 2005328329 A JP2005328329 A JP 2005328329A
Authority
JP
Japan
Prior art keywords
program
corner
section
playback
important
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004144487A
Other languages
Japanese (ja)
Inventor
Masayuki Misaki
正之 三崎
Takeshi Kawamura
岳 河村
Meiko Masaki
芽衣子 正木
Toshihiko Date
俊彦 伊達
Dairo Katayama
大朗 片山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2004144487A priority Critical patent/JP2005328329A/en
Publication of JP2005328329A publication Critical patent/JP2005328329A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To automatically select the important section of a TV program and reproduce it in a digest manner. <P>SOLUTION: A picture recording-reproducing device has a program-corner decision means 101, an important-section decision means 102, a corner important-degree decision means 103, a reproducing control means 104, and an information-display means 105. The rank of the degree of importance of a program corner is computed on the basis of the result of the computation of a program corner, an important section and the degree of importance of the corner. The reproducing sections of a plurality of digest reproducing skims utilizing these informations are screen-displayed, thus easily selecting an optimum digest reproducing skim in consideration of "genres" and contents for the program. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明はＴＶ放送などの映像信号を録画あるいは再生する際に、ダイジェスト再生することを特徴とする映像録画再生装置または映像再生装置または映像再生方法に関するものである。   The present invention relates to a video recording / playback apparatus, video playback apparatus, or video playback method that performs digest playback when recording or playing back a video signal such as a TV broadcast.

従来の映像再生方法としては、所定の再生時間長に合うようにダイジェストを自動生成するものがある（例えば、特許文献１参照）。図７は、従来の映像再生方法を示すものである。図７において、動画像格納媒体３１と優先度情報格納媒体３０からなるデータベースを備えており、ユーザが与えるダイジェスト時間入力と対象とする番組の優先度情報から、しきい値計算部６では再生時間長に見合う優先度のしきい値を求め、このしきい値以上の優先度の値をとる画像フレームをダイジェスト用画像フレーム検索部７で検索し、ダイジェスト格納媒体８に記録する。   As a conventional video playback method, there is a method of automatically generating a digest so as to meet a predetermined playback time length (see, for example, Patent Document 1). FIG. 7 shows a conventional video reproduction method. In FIG. 7, a database including a moving image storage medium 31 and a priority information storage medium 30 is provided, and the threshold value calculation unit 6 uses the digest time input given by the user and the priority information of the target program to reproduce the reproduction time. A priority threshold value corresponding to the length is obtained, and an image frame having a priority value equal to or higher than this threshold value is searched by the digest image frame search unit 7 and recorded in the digest storage medium 8.

以上の動作に先立ち、図８に示す装置で、ユーザは対象となる番組をディスプレイ４で視聴しながら重要度の大きさを優先度として判定し、ジョイスティック１を操作することで、連続的に優先度入力装置２経由で優先度情報を優先度情報格納媒体３０に記録する必要がある。   Prior to the above operation, with the apparatus shown in FIG. 8, the user determines priority as priority while viewing the target program on the display 4, and operates the joystick 1 to continuously give priority. The priority information needs to be recorded in the priority information storage medium 30 via the degree input device 2.

また、別の映像再生方法として、代表画像の抽出を信号処理により効率的に行い、代表画像を空間的に並べてデータ表示させるものであるが、コマーシャルと番組を識別してコマーシャルの要約リストを利用した映像再生方法を提供するものである（例えば、特許文献２参照）。
特許第２７５２７１６号公報 特許第３４０７８４０号公報 As another video playback method, representative images are extracted efficiently by signal processing, and the representative images are spatially arranged and displayed as data. A commercial summary list is used by identifying commercials and programs. The video reproduction method is provided (see, for example, Patent Document 2).
Japanese Patent No. 2752716 Japanese Patent No. 3407840

しかしながら、従来の特許文献１の構成では、人間が事前に一度視聴して番組の重要度を判定し、その結果を記録して初めてダイジェスト再生が可能となるものであり、この作業には多大な労力が事前に必要となるという課題を有していた。また、視聴しながら随時判定結果を記録し、人間の記憶を頼りにした局所的な時間範囲で重要度を判定しているため、番組全体を通して安定した重要度の判定にはならない場合があると予想される。また、このような不確かな判定結果に依存してダイジェスト再生を行うにもかかわらず、再生する区間が番組中のどの部分であるかなどの時間位置情報が明示されておらず、ユーザの目的に合うダイジェスト再生区間であるかどうかが視認されない。   However, in the configuration of the conventional patent document 1, digest playback is possible only when a person views the program once in advance to determine the importance level of the program and records the result. There was a problem that labor was required in advance. In addition, since the judgment result is recorded at any time while watching and the importance is judged in a local time range that relies on human memory, there may be cases where the importance cannot be judged stably throughout the program. is expected. In addition, despite the fact that digest playback is performed depending on such an uncertain determination result, the time position information such as which part of the program is to be played back is not clearly shown, and the user's purpose is It is not visually recognized whether it is a digest playback section that matches.

一方、特許文献２の構成では、ダイジェスト再生の目安として単にＣＭ区間の終端を示すのみで重要度合いを考慮したものにはなっていないという課題を有していた。   On the other hand, the configuration of Patent Document 2 has a problem in that it merely indicates the end of the CM section as a digest reproduction guideline and does not take into account the degree of importance.

本発明は、従来のこれらの課題を解決するもので、ＴＶ放送の番組中に存在する１つの意味的なまとまりである番組コーナ区間と、その各コーナ中に存在する局所的な重要区間を自動抽出した後にコーナ毎の重要度を算出しており、番組全体において、局所的な重要区間と重要な番組コーナの双方を求めてダイジェスト再生に利用可能とし、その重要区間の存在を時間軸上で俯瞰する表示を行う。その結果、番組内容や番組ジャンルによって、ダイジェスト再生スキームを変更できるダイジェスト再生機能を保有する映像再生方法を提供することを目的とする。   The present invention solves these conventional problems, and automatically sets a program corner section, which is one semantic group existing in a TV broadcast program, and a local important section existing in each corner. After the extraction, the importance for each corner is calculated. In the entire program, both the local important sections and the important program corners are obtained and can be used for digest playback. Display a bird's-eye view. As a result, an object of the present invention is to provide a video playback method having a digest playback function capable of changing the digest playback scheme according to the program content and the program genre.

従来の課題を解決するために、本発明の映像再生装置は、番組コーナの区間を決定する番組コーナ判定手段と、番組コーナ中の重要区間を決定する番組重要区間判定手段と、番組コーナの重要度を決定するコーナ重要度判定手段と、番組コーナ区間の情報と重要区間の情報とコーナ重要度の情報を用いる再生制御情報に基づいてダイジェスト再生する区間の選択を行う再生制御手段と、前記再生制御情報に基づき番組内の重要区間の時間軸上の位置を画面表示する情報表示手段とを有し、ダイジェスト再生する区間の選択を行って再生する。   In order to solve the conventional problems, the video playback apparatus according to the present invention includes a program corner determining means for determining a section of a program corner, a program important section determining means for determining an important section in the program corner, and the importance of the program corner. A corner importance level judging means for determining a degree, a playback control means for selecting a section for digest playback based on playback control information using program corner section information, important section information and corner importance level information, and the playback It has information display means for displaying on the screen the position of the important section in the program on the time axis based on the control information, and selects and reproduces the section for digest playback.

本構成によって、ダイジェスト再生区間を人手によらず自動抽出し、番組全体を通して安定した重要区間の抽出を行う。また、ダイジェスト再生として再生する区間に関しては、局所的な重要区間抽出結果や、１つの番組内の意味的な区切り区間である番組コーナの双方を利用できるので、番組内容や番組ジャンルに応じた最適なダイジェスト再生にすることが可能となる。また、ダイジェスト再生が抽出して再生した区間は、番組全体の中でどの区間であるかを画面に明確に表示して確認しながら視聴することができる。   With this configuration, digest playback sections are automatically extracted without human intervention, and stable important sections are extracted throughout the entire program. In addition, regarding the segment to be played back as digest playback, both the local important segment extraction result and the program corner, which is a semantic segment within one program, can be used, so it is optimal for the program content and program genre. It is possible to make a simple digest playback. In addition, it is possible to view the section reproduced and extracted by the digest reproduction while clearly displaying and confirming on the screen which section in the entire program.

本発明の映像再生方法によれば、信号処理によって判別した番組コーナと重要度の時間軸上の位置情報と、複数のダイジェスト再生スキームにより選択された再生区間を画面表示で確認でき、全体の中の重要コーナだけを再生して特定コーナに重点を絞った視聴方法や、各コーナの重要区間すべてを再生して全体の内容をくまなく再生して概要を知るための視聴方法など、番組のジャンルや内容を考慮して最適なダイジェスト再生スキームを容易に選択することができる。   According to the video playback method of the present invention, program corners determined by signal processing, importance position information on the time axis, and playback sections selected by a plurality of digest playback schemes can be confirmed on the screen display. The genre of the program, such as a viewing method that focuses on specific corners by playing only the important corners, and a viewing method that plays the entire content of each corner and plays the entire contents to get an overview. It is possible to easily select an optimal digest reproduction scheme in consideration of the contents and contents.

以下本発明の実施の形態について、図面を参照しながら説明する。   Embodiments of the present invention will be described below with reference to the drawings.

（実施の形態１）
図１は、本発明の実施の形態１における映像再生装置の構成図である。図１において、番組コーナ判定手段１０１はＡＶ信号から抽出した特徴量（オーディオ、画像、文字など）に基づき番組コーナの自動区間判定を行う。ここで番組コーナとは、番組の時間内でいくつかの意味のある塊りとして分割可能な単位であり、番組の時間構造を表現するものと考える。重要区間判定手段１０２は、求められた番組コーナの区間内で重要区間推定を行うものである。コーナ重要度判定手段１０３は、コーナ内の重要区間の割合が高い事を利用するなど特定の条件にマッチした番組コーナの重要度を求める。再生制御手段１０４は、番組コーナ区間、重要区間、コーナ重要度の計算結果に基づき選択されたダイジェスト再生スキームの再生区間を再生する。情報表示手段１０５は、再生制御手段の制御により番組コーナ区間、重要区間、コーナ重要度などの番組の重要な区間を時間軸に沿って画面表示する。 (Embodiment 1)
FIG. 1 is a configuration diagram of a video reproduction apparatus according to Embodiment 1 of the present invention. In FIG. 1, a program corner determination unit 101 performs automatic section determination of a program corner based on a feature amount (audio, image, character, etc.) extracted from an AV signal. Here, the program corner is a unit that can be divided into several meaningful chunks within the program time, and is considered to express the time structure of the program. The important section determination means 102 performs important section estimation within the determined section of the program corner. The corner importance level determination means 103 obtains the importance level of a program corner that matches a specific condition such as using the fact that the proportion of the important section in the corner is high. The reproduction control means 104 reproduces the reproduction section of the digest reproduction scheme selected based on the calculation result of the program corner section, the important section, and the corner importance. The information display means 105 displays the important sections of the program such as the program corner section, the important section, and the corner importance degree on the screen along the time axis under the control of the reproduction control means.

ＴＶ番組は、通常は複数のコーナに分類できる。そのコーナの例は、例えば、ニュース番組では、複数の異なるニュース単位がコーナに相当し、野球中継では、攻撃・守備の交代時期がコーナと見て良い。これらの時間的な区切りを示す重要な情報としてシーンの変化を示す画像特徴量、テロップによる文字情報、コーナの始まりを示すジングル音やＢＧＭ存在を検知する音響情報がある。これらの特徴量をＴＶ番組の音源から信号処理技術によって抽出し、コーナ区間を判定する。各コーナが求められた後、さらに重要区間の検出を行う。重要区間とは、ニュースやドキュメンタリー・教養番組では人の音声が情報の中心であると考えられ、人間が大きな声で強調して話をしている場合や、ゆっくりとメリハリを付けて話す場合などであり、スポーツ番組では得点シーンやファインプレイなどのハイライトシーンである。これらの重要区間は、オーディオ信号から抽出した音響的特徴量に基づき、区間を求めることが可能である。そして、番組コーナ中における重要区間の時間比率を求めることで、番組コーナの重要度を算出することが可能となる。本発明では、これら、番組コーナにおける重要区間の情報と、番組コーナの重要度をもとにダイジェスト再生する区間を決定し、番組中のどの部分を選択して再生するかを示して複数のダイジェスト再生スキームの中から選択することができ、また、再生中には、現在どの部分を再生しているかを画面表示してユーザに示しながら視聴することが可能となる。   TV programs can usually be classified into multiple corners. As an example of the corner, for example, in a news program, a plurality of different news units may correspond to a corner, and in a baseball broadcast, an attack / defense change time may be regarded as a corner. As important information indicating these temporal divisions, there are image feature amounts indicating scene changes, text information by telop, jingle sounds indicating the start of corners, and acoustic information for detecting the presence of BGM. These feature amounts are extracted from the sound source of the TV program by a signal processing technique, and a corner section is determined. After each corner is obtained, the important section is further detected. An important section is a person's voice that is considered to be the center of information in news and documentary / education programs. It is a highlight scene such as a scoring scene and fine play in a sports program. These important sections can be obtained based on the acoustic feature amount extracted from the audio signal. Then, by calculating the time ratio of the important section in the program corner, it is possible to calculate the importance of the program corner. In the present invention, the digest playback section is determined based on the information on the important section in the program corner and the importance of the program corner, and a plurality of digests are shown indicating which part in the program is selected and played back. It is possible to select from among the reproduction schemes, and during reproduction, it is possible to view while displaying on the screen which part is currently being reproduced and showing it to the user.

図２、図３は情報表示手段が示す情報の一例であり、図２では、番組コーナ（コーナ１、コーナ２、コーナ３、コーナ４）、重要区間（Ｉ１、Ｉ２、Ｉ３、Ｉ４）、コーナの重要度ランク（ランク＝１、ランク＝２、ランク＝３、ランク＝４）の番組における時間軸上の配置を示し、さらに、この情報に基づく再生スキームとして３つの異なる方法１ａ、２ａ、３ａを示す。ここで、再生方法１ａでは、重要区間に着目し、発生する時間順にＩ１、Ｉ２、Ｉ３、Ｉ４を再生する。次に、再生方法２ａでは、コーナの重要度ランクに着目し、その中で最も重要であるランク＝１の区間のみを再生する。そして、再生方法３ａでは、重要度ランクの最も高いコーナの重要区間に着目し、重要区間Ｉ３、Ｉ４のみを再生する。これらの３つの再生スキームの特長を野球中継を例として示す。例えば、方法１ａでは、番組全体に発生したいくつかのハイライトシーン（得点シーン）を概観することが可能となる。方法２ａでは最も重要なコーナを全て視聴するものであって、ハイライトコーナ（例えば、７回裏の攻撃）を全体として見ることで、特定のハイライトシーンの前後の流れも把握することが可能である。また、方法３ａでは、その番組中の最も盛り上がったハイライトシーンの区間に限定した最も要約度の高いダイジェスト再生を与えるものである。これらの再生スキームは、番組の後続的な特長だけでなく、番組の中身の結果（例えば応援するチームの勝敗結果など）の情報に応じて、ユーザが適宜選択可能であることが望ましいと考えられる。   2 and 3 show examples of information indicated by the information display means. In FIG. 2, program corners (corner 1, corner 2, corner 3, corner 4), important sections (I1, I2, I3, I4), corners are shown. Shows an arrangement on a time axis in a program of importance rank rank (rank = 1, rank = 2, rank = 3, rank = 4), and three different methods 1a, 2a, 3a as reproduction schemes based on this information Indicates. Here, in the reproduction method 1a, I1, I2, I3, and I4 are reproduced in the order in which they occur, focusing on the important section. Next, in the reproduction method 2a, attention is paid to the importance rank of the corner, and only the section of rank = 1 that is the most important among them is reproduced. In the reproduction method 3a, attention is paid to the important section of the corner having the highest importance rank, and only the important sections I3 and I4 are reproduced. The features of these three playback schemes are shown as an example of a baseball broadcast. For example, in the method 1a, it is possible to overview several highlight scenes (scoring scenes) that have occurred in the entire program. Method 2a is to watch all the most important corners, and by looking at the highlight corners (for example, the 7th attack) as a whole, it is possible to grasp the flow before and after a specific highlight scene. It is. Further, in the method 3a, digest reproduction with the highest summarization degree limited to the section of the most exciting highlight scene in the program is given. It is considered desirable that these playback schemes can be appropriately selected by the user in accordance with not only the subsequent features of the program but also the information on the contents of the program (for example, the result of the team that supports the team). .

別の再生スキームを図３に示す。番組コーナ、重要区間、コーナの重要度ランクに関しては、図２と同様である。この図における再生スキームでは、先の図２とは異なり、再生する時間順の制約なく視聴することも選択肢に加えている。再生スキームとして３つの異なる方法１ｂ、２ｂ、３ｂを示す。ここで、再生方法１ｂは、再生方法１ａと同じである。次に、再生方法２ｂでは、コーナの重要度ランクに着目し、重要度ランクの高い順番にコーナ毎に再生する。そして、再生方法３ｂでは、重要度ランクの高いコーナの重要区間に着目し、重要度ランクの高いコーナの重要区間から順番に再生する。これらの再生スキームでは、再生時間順が、実際の番組とは異なるが、重要な順番に次々と再生を行うことが可能なケースとして、例えば音楽番組などが考えられる。音楽番組では、重要区間は音楽区間であるとし、その中でもユーザの興味対象とマッチした音楽が含まれる番組コーナから順番に視聴することを想定した。   Another regeneration scheme is shown in FIG. The program corner, the important section, and the importance rank of the corner are the same as those in FIG. In the reproduction scheme in this figure, unlike the previous FIG. 2, viewing without restriction of the reproduction time order is added to the options. Three different methods 1b, 2b, 3b are shown as regeneration schemes. Here, the reproduction method 1b is the same as the reproduction method 1a. Next, in the reproduction method 2b, attention is paid to the importance rank of the corner, and reproduction is performed for each corner in order of the importance rank. In the reproduction method 3b, attention is paid to an important section of a corner having a high importance rank, and reproduction is performed in order from an important section of a corner having a high importance rank. In these playback schemes, the playback time order is different from the actual program, but as a case where playback can be performed one after another in an important order, for example, a music program can be considered. In a music program, the important section is assumed to be a music section, and it is assumed that the program corners are viewed in order from the program corner including the music that matches the user's interest.

このように、信号処理によって判別した番組コーナと重要度の時間軸上の位置情報と、複数のダイジェスト再生スキームにより選択された再生区間を画面表示で確認でき、全体の中の重要コーナだけを再生して特定コーナに重点を絞った視聴方法や、各コーナの重要区間すべてを再生して全体の内容をくまなく再生して概要を知るための視聴方法など、番組のジャンルや内容を考慮して最適なダイジェスト再生スキームを容易に選択することができる。   In this way, program corners determined by signal processing, position information on the time axis of importance, and playback sections selected by multiple digest playback schemes can be confirmed on the screen display, and only important corners in the whole are played back. In consideration of the genre and content of the program, such as viewing methods that focus on specific corners, and viewing methods that play all the important sections of each corner and reproduce the entire contents to get an overview. An optimal digest reproduction scheme can be easily selected.

（実施の形態２）
図４は、本発明の実施の形態１における映像再生装置の構成図である。図４において、ＣＭ区間判定手段はＡＶ信号から抽出した特徴量（オーディオ、画像）に基づきＣＭ区間の自動区間判定を行う。このＣＭ区間に挟まれた番組区間は、ひとまとまりの意味のある区切りであって番組コーナ（コーナ１、コーナ２、コーナ３、コーナ４）と見なすことにする。非重要区間判定手段２０２は、番組中の音声や音楽などの重要な音響イベントを除く区間であり、ＣＭ区間を含む区間であるものとして、ＮＩ１、ＮＩ２、…、ＮＩ８で示す区間とする。番組コーナ中の非重要部を除外した区間Ｒ１、Ｒ２、Ｒ３、…、Ｒ８を非重要部除外区間とした。コーナ重要度判定手段２０３は、番組コーナのうち、非重要区間の占める割合が少ないものからコーナの重要度が高いと判断し重要度ランクを決定する。再生制御手段１０４は、と情報表示手段１０５は、図１と同様の動作を行うものである。 (Embodiment 2)
FIG. 4 is a configuration diagram of the video reproduction apparatus according to Embodiment 1 of the present invention. In FIG. 4, the CM section determination means performs automatic section determination of the CM section based on the feature amount (audio, image) extracted from the AV signal. The program section sandwiched between the CM sections is a meaningful segmentation and is regarded as a program corner (corner 1, corner 2, corner 3, corner 4). The non-important section determination means 202 is a section excluding important acoustic events such as voice and music in the program, and includes sections indicated by NI1, NI2,. The sections R1, R2, R3,..., R8 excluding the non-important part in the program corner are set as the non-important part excluded section. The corner importance level determination unit 203 determines that the importance level of a corner is high from the program corners having a small proportion of non-important sections, and determines the importance level rank. The reproduction control means 104 and the information display means 105 perform the same operation as in FIG.

本実施の形態では、ＣＭ区間から番組コーナを決定し、この番組コーナから非重要部の除外を行うことをもとにコーナの重要度ランクを決定して再生する区間を求めている。この非重要区間を求める代わりに重要区間を直接求めることも当然可能である。   In this embodiment, the program corner is determined from the CM section, and the importance rank of the corner is determined based on the removal of the unimportant part from the program corner, and the section to be reproduced is obtained. Of course, it is possible to obtain the important section directly instead of obtaining the non-important section.

図５は情報表示手段が示す情報の一例であり、番組コーナ（コーナ１、コーナ２、コーナ３、コーナ４）、非重要区間（ＮＩ１、ＮＩ２、ＮＩ３、ＮＩ４）、非重要部除外区間（Ｒ１、Ｒ２、Ｒ３、…、Ｒ８）、コーナの重要度ランク（ランク＝１、ランク＝２、ランク＝３、ランク＝４）の番組における時間軸上の配置を示し、さらに、この情報に基づく再生スキームとして３つの異なる方法１ｃ、２ｃ、３ｃを示す。ここで、再生方法１ｃでは、非重要部除外区間に着目し、発生する時間順にＲ１、Ｒ２、…、Ｒ８を再生する。次に、再生方法２ｃでは、コーナの重要度ランクに着目し、番組の時間的順番とは異なるがランクの重要度順に番組コーナを再生する。そして、再生方法３ｃでは、重要度ランクの最も高いコーナの非重要部除外区間に着目し、非重要部除外区間Ｒ１のみを再生する。   FIG. 5 shows an example of information indicated by the information display means. The program corner (corner 1, corner 2, corner 3, corner 4), non-important section (NI1, NI2, NI3, NI4), unimportant section excluded section (R1) , R2, R3,..., R8), the arrangement on the time axis in the program of the importance ranking of the corner (rank = 1, rank = 2, rank = 3, rank = 4), and further reproduction based on this information The scheme shows three different methods 1c, 2c, 3c. Here, in the reproduction method 1c, R1, R2,..., R8 are reproduced in the order in which they occur, paying attention to the non-important part exclusion section. Next, in the reproduction method 2c, paying attention to the importance rank of the corners, the program corners are reproduced in the order of importance of the ranks although they are different from the temporal order of the programs. In the reproduction method 3c, attention is paid to the non-important portion excluded section of the corner having the highest importance rank, and only the unimportant portion excluded section R1 is reproduced.

本実施の形態では、ＣＭ区間の判定結果に基づき番組コーナを決定し、番組コーナ中の非重要区間の判定結果に基づき番組コーナ中の非重要区間を除外し、それによって再生する区間を求めているため、番組中の重要度が容易に決定できない場合でも本来必要でない区間を削減することでダイジェスト的な再生を実現するものとして有効である。   In this embodiment, the program corner is determined based on the determination result of the CM section, the non-important section in the program corner is excluded based on the determination result of the non-important section in the program corner, and the section to be reproduced is thereby obtained. Therefore, even when the importance level in the program cannot be easily determined, it is effective for realizing digest reproduction by reducing sections that are not originally required.

この再生スキームとして有効な番組ジャンルとしては、バラエティ番組や、トーク番組などの音声が中心の構造であり、重要区間の判定には、言語意味的な判断が必要とされるケースの時である。これらの番組においても、非重要な音声区間の合間のシーンなどを除外することで、番組の効率的な再生を実現することが可能となる。   An effective program genre as a reproduction scheme is a structure in which audio such as a variety program or a talk program is centered, and it is a case where language semantic judgment is required to determine an important section. Also in these programs, it is possible to realize efficient reproduction of programs by excluding scenes between unimportant audio sections.

（実施の形態３）
図６には、本発明の実施の形態３における映像録画再生装置の構成図を示したものである。ＴＶ放送を録画する際には、ＥＰＧなどによって番組書誌情報を用いることが可能であるとし、本実施例では、番組コーナ判定手段３０１、重要区間判定手段３０２、およびコーナ重要度判定手段３０３においてこの番組書誌情報を利用して判定を行う。この番組書誌情報を利用するメリットとしては、例えば、番組のジャンル情報（スポーツ、バラエティ、映画、など）を用いて重要な内容の対象が変更できることである。番組コーナの情報と、番組コーナ中の重要区間の情報と、番組コーナの重要度ランクの情報をメタデータとしてＡＶ信号と一緒に情報記録媒体３０６に記録する。そして、この記録媒体のコンテンツを再生する時に、図２や図３などの再生スキームと全体における再生区間の位置を示す画面表示を提示して、ユーザの選択指示を入力させる。これにより、所望のダイジェスト再生スキームに従って、効率的に視聴を行うことが可能となる。 (Embodiment 3)
FIG. 6 shows a block diagram of a video recording / playback apparatus according to Embodiment 3 of the present invention. When recording a TV broadcast, it is assumed that program bibliographic information can be used by EPG or the like. In this embodiment, the program corner determination means 301, the important section determination means 302, and the corner importance degree determination means 303 Judgment is made using program bibliographic information. An advantage of using this program bibliographic information is that, for example, the target of important contents can be changed using program genre information (sports, variety, movies, etc.). Information on the program corner, information on important sections in the program corner, and information on importance rank of the program corner are recorded as metadata on the information recording medium 306 together with the AV signal. Then, when reproducing the contents of the recording medium, a screen display showing the reproduction scheme such as FIG. 2 and FIG. 3 and the position of the reproduction section in the whole is presented, and a user's selection instruction is input. This makes it possible to view efficiently according to a desired digest reproduction scheme.

本発明にかかる映像再生装置、映像録画再生装置、あるいは映像再生方法は、番組のダイジェスト再生機能を有し、大容量の蓄積メディアを搭載する映像コンテンツの蓄積装置を効率よく視聴する際に有用である。   The video playback device, video recording / playback device, or video playback method according to the present invention has a program digest playback function, and is useful for efficiently viewing a video content storage device equipped with a large-capacity storage medium. is there.

本発明の実施の形態１における映像再生装置の構成図Configuration diagram of video playback apparatus in Embodiment 1 of the present invention ダイジェスト再生スキームと再生区間の時間軸上の位置と画面表示図の例を示す図A diagram showing an example of the digest playback scheme, the position of the playback section on the time axis, and a screen display diagram ダイジェスト再生スキームと再生区間の時間軸上の位置と画面表示図の例２を示す図A diagram showing an example 2 of a digest playback scheme, a position of a playback section on the time axis, and a screen display diagram 本発明の実施の形態２における映像再生装置の構成図Configuration diagram of video playback apparatus in Embodiment 2 of the present invention ダイジェスト再生スキームと再生区間の時間軸上の位置と画面表示図の例３を示す図A diagram showing an example 3 of a digest playback scheme, a position of a playback section on the time axis, and a screen display diagram 本発明の実施の形態３における映像録画再生装置の構成図Configuration diagram of video recording / playback apparatus in Embodiment 3 of the present invention 従来の映像再生方法の構成図Configuration diagram of conventional video playback method 従来の映像再生方法の構成図Configuration diagram of conventional video playback method

符号の説明Explanation of symbols

１０１ 番組コーナ判定手段
１０２ 重要区間判定手段
１０３ コーナ重要度判定手段
１０４ 再生制御手段
１０５ 情報表示手段 101 Program corner determination means 102 Important section determination means 103 Corner importance degree determination means 104 Playback control means 105 Information display means

Claims (11)

録画済みのＴＶ放送番組中に存在する番組コーナの区間を決定する番組コーナ判定手段と、
前記番組コーナ中の重要区間を決定する番組重要区間判定手段と、
前記番組コーナ判定手段と前記番組重要区間判定手段の判定結果に基づき番組コーナの重要度を決定するコーナ重要度判定手段と、
番組コーナ区間の情報と重要区間の情報とコーナ重要度の情報を用いる再生制御情報に基づいてダイジェスト再生する区間の選択を行う再生制御手段と、
前記再生制御情報に基づき番組内の重要区間の時間軸上の位置を画面表示する情報表示手段とを備えた映像再生装置。 A program corner determining means for determining a section of a program corner existing in a recorded TV broadcast program;
Program important section determining means for determining an important section in the program corner;
Corner importance determining means for determining importance of a program corner based on determination results of the program corner determining means and the program important section determining means;
Reproduction control means for selecting a segment for digest reproduction based on reproduction control information using program corner section information, important section information, and corner importance degree information,
A video playback device comprising information display means for displaying on the screen the position of the important section in the program on the time axis based on the playback control information. 録画済みのＴＶ放送番組中に存在するコマーシャルの区間を決定するコマーシャル区間判定手段と、
前記番組中のコマーシャルで区切られた番組区間を番組コーナと見なしてその区間内で重要区間を決定する番組重要区間判定手段と、
前記コマーシャル区間判定手段と前記番組重要区間判定手段の判定結果に基づき番組コーナの重要度を決定するコーナ重要度判定手段と、
コマーシャル区間の情報と重要区間の情報とコーナ重要度の情報を用いる再生制御情報に基づいてダイジェスト再生する区間の選択を行う再生制御手段と、
前記再生制御情報に基づき番組内の重要区間の時間軸上の位置を画面表示する情報表示手段とを備えた映像再生装置。 A commercial section determining means for determining a commercial section existing in a recorded TV broadcast program;
A program important section determination means for determining an important section within the section by regarding the program section divided by the commercial in the program as a program corner,
Corner importance determining means for determining importance of a program corner based on determination results of the commercial section determining means and the program important section determining means;
Playback control means for selecting a section for digest playback based on playback control information using information on commercial sections, information on important sections and corner importance information;
A video playback device comprising information display means for displaying on the screen the position of the important section in the program on the time axis based on the playback control information. ＴＶ放送番組中に存在する番組コーナの区間を決定する番組コーナ判定手段と、
前記番組中の重要区間を決定する番組重要区間判定手段と、
前記番組コーナ判定手段と前記番組重要区間判定手段の判定結果に基づき番組コーナの重要度を決定するコーナ重要度判定手段と、
映像音響信号と対応する番組コーナ区間の情報と重要区間の情報とコーナ重要度の情報とを記録メディアに記録する再生制御情報記録手段と、
映像音響信号と再生制御情報を記録・再生するための情報記録媒体と、
再生制御情報に基づき番組内の重要区間の時間軸上の位置を画面表示する情報表示手段と、
番組コーナ区間と重要区間とコーナ重要度に基づきダイジェスト再生する区間の選択を行う再生制御手段とを備えた映像録画再生装置。 A program corner determining means for determining a section of a program corner existing in a TV broadcast program;
Program important section determining means for determining an important section in the program;
Corner importance determining means for determining importance of a program corner based on determination results of the program corner determining means and the program important section determining means;
Reproduction control information recording means for recording information on the program corner section corresponding to the audiovisual signal, information on the important section and information on the corner importance degree on a recording medium,
An information recording medium for recording / reproducing video / audio signals and reproduction control information;
Information display means for displaying a position on the time axis of an important section in the program based on the reproduction control information;
A video recording / playback apparatus comprising a program corner section, an important section, and a playback control means for selecting a section for digest playback based on the corner importance. 録画済みのＴＶ放送番組中に存在する番組コーナの区間を決定し、
前記番組コーナ中の重要区間を決定し、
２つの判定手段の判定結果に基づき番組コーナの重要度を決定し、
番組コーナ区間の情報と重要区間の情報とコーナ重要度の情報を用いる再生制御情報に基づき所定のダイジェスト再生スキームで再生する区間を決定し、
前記再生制御情報に基づき番組内の重要区間の時間軸上の位置と所定のダイジェスト再生スキームにおける再生区間とを画面表示して提示し、
選択されたダイジェスト再生スキームに基づき決定された区間を再生する映像再生方法。 Determine the section of the program corner that exists in the recorded TV broadcast program,
Determine important sections in the program corner,
The importance of the program corner is determined based on the determination results of the two determination means,
Based on the playback control information using the information on the program corner section, the information on the important section, and the information on the corner importance level, the section to be played back in the predetermined digest playback scheme is determined
Based on the playback control information, the position on the time axis of the important section in the program and the playback section in a predetermined digest playback scheme are displayed on the screen and presented,
A video playback method for playing back a section determined based on a selected digest playback scheme. ダイジェスト再生スキームは、
全ての番組コーナにおける重要区間を時間順に再生することを特徴とする請求項４に記載の映像再生方法。 The digest playback scheme is
5. The video playback method according to claim 4, wherein important sections in all program corners are played back in time order. ダイジェスト再生スキームは、
重要度ランクの最も高い番組コーナのみを再生することを特徴とする請求項４に記載の映像再生方法。 The digest playback scheme is
5. The video reproduction method according to claim 4, wherein only the program corner having the highest importance rank is reproduced. ダイジェスト再生スキームは、
重要度ランクの最も高い番組コーナにおける重要区間のみを再生することを特徴とする請求項４に記載の映像再生方法。 The digest playback scheme is
5. The video playback method according to claim 4, wherein only the important section in the program corner having the highest importance rank is played back. ダイジェスト再生スキームは、
重要度ランクの高い順に番組コーナを再生することを特徴とする請求項４に記載の映像再生方法。 The digest playback scheme is
5. The video playback method according to claim 4, wherein program corners are played back in descending order of importance rank. ダイジェスト再生スキームは、
重要度ランクの高い順に番組コーナにおける重要区間を再生することを特徴とする請求項４に記載の映像再生方法。 The digest playback scheme is
5. The video reproducing method according to claim 4, wherein important sections in the program corner are reproduced in descending order of importance rank. 録画済みのＴＶ放送番組中に存在する番組コーナの区間を決定し、
前記番組コーナ中の重要区間を決定し、
２つの判定手段の判定結果に基づき番組コーナの重要度を決定し、
番組コーナ区間の情報と重要区間の情報とコーナ重要度の情報を用いる再生制御情報に基づき視聴観点が異なる複数のダイジェスト再生スキームにおける再生する区間を決定し、
前記再生制御情報に基づき番組内の重要区間の時間軸上の位置と複数のダイジェスト再生スキームにおける再生区間とを画面表示して提示し、
選択されたダイジェスト再生スキームに基づき選択された区間を再生する映像再生方法。 Determine the section of the program corner that exists in the recorded TV broadcast program,
Determine important sections in the program corner,
The importance of the program corner is determined based on the determination results of the two determination means,
Determine the sections to be played in multiple digest playback schemes with different viewing viewpoints based on the playback control information using the information on the program corner section, the information on the important section and the information on the corner importance,
Based on the playback control information, the position on the time axis of the important section in the program and the playback section in a plurality of digest playback schemes are displayed on the screen and presented,
A video playback method for playing back a selected section based on a selected digest playback scheme. ダイジェスト再生スキームは、
請求項５、請求項６、請求項７、請求項８、請求項９のうち少なくとも２つ以上を具備することを特徴とする請求項１０に記載の映像再生方法。 The digest playback scheme is
The video reproduction method according to claim 10, comprising at least two of claims 5, 6, 7, 8, and 9.
JP2004144487A 2004-05-14 2004-05-14 Picture reproducer, picture recording-reproducing device and method of reproducing picture Pending JP2005328329A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004144487A JP2005328329A (en) 2004-05-14 2004-05-14 Picture reproducer, picture recording-reproducing device and method of reproducing picture

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004144487A JP2005328329A (en) 2004-05-14 2004-05-14 Picture reproducer, picture recording-reproducing device and method of reproducing picture

Publications (1)

Publication Number Publication Date
JP2005328329A true JP2005328329A (en) 2005-11-24

Family

ID=35474310

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004144487A Pending JP2005328329A (en) 2004-05-14 2004-05-14 Picture reproducer, picture recording-reproducing device and method of reproducing picture

Country Status (1)

Country Link
JP (1) JP2005328329A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007132690A1 (en) * 2006-05-17 2007-11-22 Nec Corporation Speech data summary reproducing device, speech data summary reproducing method, and speech data summary reproducing program
JP2008204568A (en) * 2007-02-21 2008-09-04 Matsushita Electric Ind Co Ltd Recording device
JP2009194491A (en) * 2008-02-13 2009-08-27 Nippon Telegr & Teleph Corp <Ntt> Animation censoring device, animation censoring method, animation censoring program, and computer-readable recording medium recorded with the program
JP2011019172A (en) * 2009-07-10 2011-01-27 Sony Corp Information processing apparatus and play list display method
JP2011505715A (en) * 2007-11-05 2011-02-24 サムスン エレクトロニクス カンパニー リミテッド Video display device and control method thereof
US11837028B2 (en) 2020-09-29 2023-12-05 New Oriental Education & Technology Group Inc. Dance segment recognition method, dance segment recognition apparatus, and storage medium

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007132690A1 (en) * 2006-05-17 2007-11-22 Nec Corporation Speech data summary reproducing device, speech data summary reproducing method, and speech data summary reproducing program
JP2008204568A (en) * 2007-02-21 2008-09-04 Matsushita Electric Ind Co Ltd Recording device
US8644687B2 (en) 2007-02-21 2014-02-04 Panasonic Corporation Recording apparatus
JP2011505715A (en) * 2007-11-05 2011-02-24 サムスン エレクトロニクス カンパニー リミテッド Video display device and control method thereof
US8762844B2 (en) 2007-11-05 2014-06-24 Samsung Electronics Co., Ltd. Image display apparatus and method of controlling the same via progress bars
JP2009194491A (en) * 2008-02-13 2009-08-27 Nippon Telegr & Teleph Corp <Ntt> Animation censoring device, animation censoring method, animation censoring program, and computer-readable recording medium recorded with the program
JP2011019172A (en) * 2009-07-10 2011-01-27 Sony Corp Information processing apparatus and play list display method
US11837028B2 (en) 2020-09-29 2023-12-05 New Oriental Education & Technology Group Inc. Dance segment recognition method, dance segment recognition apparatus, and storage medium
JP7467764B2 (en) 2020-09-29 2024-04-15 新▲東▼方教育科技集▲団▼有限公司 Dance fragment recognition method, dance fragment recognition device, and storage medium

Similar Documents

Publication Publication Date Title
CN101777371B (en) Apparatus for reproducing AV data on information storage medium
JP4683281B2 (en) REPRODUCTION SYSTEM, REPRODUCTION DEVICE, REPRODUCTION METHOD, INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD, AND PROGRAM
JP4692775B2 (en) Video content playback support method, video content playback support system, and information distribution program
US20110320471A1 (en) Movie Recommendation System and Movie Recommendation Method
JP3966515B2 (en) Network system, server, data recording / reproducing apparatus, method and program thereof
KR20070001240A (en) Method and apparatus to catch up with a running broadcast or stored content
JP2008061120A (en) Reproducing apparatus, retrieving method and program
KR101369747B1 (en) Information recording medium, appratus and method for reproducing video contents
JP2007336283A (en) Information processor, processing method and program
JP2008312183A (en) Information processing apparatus, method, and program
KR20090089878A (en) Method for creating a new summary of an audiovisual document that already includes a summary and reports and a receiver that can implement said method
JP5261188B2 (en) Video scene search method and scene search system using the same
JP2005328329A (en) Picture reproducer, picture recording-reproducing device and method of reproducing picture
JP4276042B2 (en) INDEX DATA GENERATION DEVICE, INDEX DATA GENERATION METHOD, INDEX DATA GENERATION PROGRAM AND INFORMATION RECORDING MEDIUM CONTAINING THE SAME, CONTENT DATA REPRODUCTION DEVICE, CONTENT DATA REPRODUCTION METHOD, CONTENT DATA REPRODUCTION PROGRAM, AND INFORMATION RECORDING MEDIUM CONTAINING THE SAME
JP2008153920A (en) Motion picture list displaying apparatus
JP2007149235A (en) Content editing apparatus, program, and recording medium
JP2007288300A (en) Video audio reproducing apparatus
JP4609711B2 (en) Image processing apparatus and method, and program
JP4162459B2 (en) Multimedia information reproducing apparatus, multimedia information reproducing method and program
KR100370249B1 (en) A system for video skimming using shot segmentation information
JP4230402B2 (en) Thumbnail image extraction method, apparatus, and program
JP5266981B2 (en) Electronic device, information processing method and program
KR100823281B1 (en) Method and apparatus for replaying contents
JP2006325012A (en) Support method of selecting program to be video recorded and video recording and reproducing apparatus
JPH10327386A (en) Video information storing device